Поисковые системы являются источником для запуска основной части ботов.
В 2013 году трафик ботов увеличился. К таким выводам пришла аналитическая компания Incapsula. По итогам прошлого года, по частоте заходов на сайты они обогнали людей на 51%, а в этом году – до 61,5%.
Поисковые системы в последнее время увеличили частоту индексации сайтов и являются источником для запуска основной части ботов. Вторыми по частоте посещения (5%)сайтов являются «скреперы» (scrapper), которые помогают автоматически скопировать файлы контента сайта с целью создания дубликатов. На последнем месте анти-рейтинга хакерские инструменты (4,5%).
Инструменты для DDoS-атак, занявшие 20,5% трафика были отнесены к отдельной категории -“Impersonators”. Учитывая тот факт, что во время проведения DDoS-атаки количество ботов, заходящих на сайт, составляет почти 99,9% всех посетителей, было принято решение выделить их в отдельную категорию. Дело в том, что боты способны подделывать user-agent, выдавая себя за реальных посетителей.
Подробней с отчетом экспертов компании Incapsula можно ознакомиться здесь.