как защитить сайт от накрутки ПФ ботами

Как бороться с накруткой поведенческих факторов на сайте

Искусственная накрутка поведенческих факторов позволяет ускорить вывод сайта в топовые позиции поисковиков всего за 5-14 дней. Для этого его владельцу не придется «колдовать» над SEO, контентом, раскруткой блога.

Однако в процессе страдают сторонние сайты и даже рекламодатели, объявления которых скликивают боты при нагуливании своих профилей. Рассказываем, какие методы борьбы с накруткой можно использовать для защиты своих позиций и трафика.

Значимость поведенческих факторов в ранжировании на поиске

Поисковые системы оценивают и ранжируют сайты по принципу E-E-A-T: экспертности, авторитетности, опыту, надежности. Также учитывается, насколько полезен контент и как его воспринимают пользователи.

Для оценки используются поведенческие факторы — метрики взаимодействия пользователей с посадочной страницей:

  • просмотр только части или всего контента,
  • переходы по внутренним и внешним ссылкам,
  • клики по кнопкам и целевые действия,
  • пользовательский опыт (например, наличие мобильной версии),
  • возврат в поиск — дает поисковой системе сигнал, что посетитель не нашел для себя полезной информации, то есть сайт не решает проблему = некачественный = не достоин высоких позиций.

Современные алгоритмы поисковых систем учитывают поведенческие параметры на уровне 15-40% в общей формуле ранжирования. Для коммерческих запросов вес таких факторов выше, поскольку поведение пользователей ясно показывает эффективность страницы в решении задачи покупателя. Это критично для бизнеса, где рост позиций напрямую увеличивает количество клиентов и доход.

Кто накручивает ПФ на сайте

кто выполняет накрутку ПФ

Чтобы ускорить, удешевить и автоматизировать процесс, владельцы сайтов привлекают к накрутке сервисы, а те — ботов. 

— Автоматизированные боты. Сложные скрипты, которые имитируют поиск, переходы и действия пользователя, способны обходить капчи и создавать цифровой след, накапливать cookie и историю поиска.

Однако, чтобы сделать недействительный трафик с накруткой ПФ максимально естественным, на помощь приходят исполнители с бирж.

— Исполнители с бирж (скликиватели). Реальные люди с разными устройствами, браузерами и историей поведения, что делает накрутку более натуралистичной.

Есть инструменты, которые специализируются только на накрутке. Также существуют и другие сервисы, которые предлагают сразу комплекс работ в виде скликивания рекламы конкурентов и накрутки подписчиков в каком-нибудь YouTube.

Как выглядит накрутка поведенческих факторов

позиции сайта после накрутки

Процесс

Сам процесс накрутки можно разделить на два-три этапа: 1) сбор истории поиска через конкурирующие на поиске страницы; 2) заходы на целевой сайт; 3) возвращения (опционально).

ЭтапОписаниеИспользуемые методы
1. НагуливаниеБоты «задают» поисковой системе определенные запросы, переходят по  любым результатам выдачи (в том числе по рекламе), собирают cookie и историю поиска. Не взаимодействуют с контентом или взаимодействуют рандомизированно.Переходы по ТОП-50 результатам, возврат в выдачу.Прим. Если на сайте нет защиты от накруток.
2. Целевые переходыПереход на продвигаемый сайт по заданному пулу запросов с эмуляцией взаимодействия (чтение, клики, добавление в корзину).Интерактивные действия
3. Повторные визиты (опционально)Возврат через заданные промежутки времени как признак заинтересованности.Регулярные повторные визиты

Параметры переходов

Чтобы поисковые системы воспринимали ботов как реальных пользователей, владельцы ботоферм применяют различные тактики маскировки недействительного трафика:

  • геотаргетинг через ротацию IP (город, регион) — используют свои или арендованные прокси-сервисы,
  • график посещений — заказчик настраивает время суток и дни недели, когда должна выполняться накрутка,
  • действия на сайте —  скрипты с имитацией человеческого поведения: переходы по разделам, клики по кнопкам, добавление товаров в корзину, прокрутки,
  • количество страниц за визит,
  • число визитов за отрезок времени,
  • мобильный или десктопный трафик,
  • демография — возраст, пол посетителей,
  • продолжительность,
  • цифровой след (отпечатки) устройства, профиля.

Также сервисы предлагают использовать эмуляцию для распределения по браузерам, ОС и другим параметрам.

Как это влияет на мой сайт?

Нарушение правил поисковых систем приводит к наложению санкций и бана со стороны поисковых систем — понижению позиций отдельных страниц или всего сайта в поиске, искажению статистики и маркетинговых данных, финансовому перерасходу.

  • Падение позиций. Поисковики могут наложить на сайт, который выступает в качестве «прокладки», санкции за искусственные манипуляции и накрутки. 
  • Парковка товаров. Для имитации действий боты могут «парковать» товары в интернет-магазинах — добавлять их массово в корзину без совершения покупки.
  • Искажённая аналитика. Боты увеличивают показатели отказов, снижают глубину просмотров и время визита, портят поведенческие метрики.
  • Перегрузка сервера. Всплеск трафика может привести к недоступности ресурса.

Сторонние сайты, используемые ботами для создания «истории» поисковых запросов и поведения, могут столкнуться с резким искусственным ростом трафика без видимых причин. Это вызывает подозрения у поисковых систем и ведет к риску наложения санкций.

Реальные последствия такой накрутки для пострадавших сайтов трудно предсказать: поисковые системы могут наложить фильтры, ухудшить ранжирование, а в некоторых случаях даже заблокировать ресурс или применить более серьезные санкции.

Какой фильтр накладывает Яндекс за накрутку поведенческих метрик

Фильтр за накрутку поведенческих факторов в поисковой системе Яндекс был введён в 2011 году. Он предназначен для предотвращения попадания в поисковую выдачу сайтов, которые используют искусственную имитацию пользовательской активности.

За что применяют наказание:

  • за неестественные переходы по ключевым запросам из поисковой выдачи;
  • за клики по SEO-ссылкам;
  • за попытки искусственного улучшения поведенческих факторов.

Признаки наложения санкций:

  • резкое падение позиций по большинству запросов, кроме жизненно важных или запросов с указанием URL,
  • заметное уменьшение трафика.

От накрутки страдают сразу все сайты, которые попали «под раздачу».

Есть ли в Google фильтр за накрутку?

В Google нет отдельного официального фильтра, который бы напрямую наказывал за накрутку поведенческих факторов. Вместо этого поисковая система применяет сложные алгоритмы ранжирования, которые учитывают множество сигналов пользовательской активности и оценивают их естественность.

Если ПС выявляет неестественное поведение пользователей на странице (например, массовые клики или переходы с признаками автоматизации), тогда алгоритмы Google могут снижать позиции сайта или полностью его исключать из выдачи за манипуляции, что фактически является формой санкций.

Признаки накрутки поведенческих метрик в трафике

Чек-лист: что смотреть в счетчиках аналитики

  • источники трафика,
  • объем трафика,
  • показатель отказов и его динамика,
  • глубина просмотров,
  • продолжительность посещения,
  • поведение пользователей,
  • типы устройств,
  • сравнение с предыдущими периодами,
  • география.

Признаки и примеры

Признаки нужно смотреть в счетчиках аналитики. При анализе визитов обратите внимание на следующие метрики:

— Резкий рост трафика из поисковых систем

Необъяснимое увеличение посещаемости за короткий период времени может указывать на автоматизированные визиты. Смотрите не только ПК, но и мобильные переходы.

— Массовые визиты по одним и тем же ключевым запросам

Как правило, это могут быть длинные низкочастотные запросы. Некоторые могут полностью соответствовать Title сайта, для которого идет накрутка. Например:

визиты в Метрике с накруткой поведенческих факторов по запросам

выдача

В данном случае совпадает даже общая ошибка: «вАпросах».

У таких визитов будет набор характерных паттернов: единый период посещаемости, неестественно большое количество одинаковых запросов, высокий показатель отказов и аномальные значения других метрик.

— Время выжидания

Как только бот «приземляется» из поиска на страницу, он выжидает 12-16 секунд, чтобы визит был засчитан. И только после этого он начинает прокручивать страницу, передвигать курсором и взаимодействовать с контентом.

бездействие

— Аномальные источники трафика

Обратите внимание на внешние источники, откуда идут визиты. Боты могут массово генерировать переходы с трастовых и популярных ресурсов по «внешним ссылкам». Например, beeline.ru или sberbank.ru. Это не говорит о том, что на таких сайтах размещена ссылка на вас. Это значит, что бот манипулирует параметром view-source в браузере.

— Высокая частота посещений одним и тем же пользователем

Один и тот же пользователь за короткий промежуток времени посещает сайт несколько раз. Смотреть нужно вкупе с другими параметрами, в том числе анализировать запись самого визита, если есть возможность.

— Боты заходят круглосуточно

Обратите внимание на время, когда посетители переходят на сайт по определенным запросам. Боты могут делать это круглосуточно.

время ботовых визитов

— Повторяемость действий на сайте между разными визитами

Например, пользователь в 2 утра с Windows 10 в Chrome перешел на страницу, выждал 20 секунд, выполнил две-три прокрутки вниз, ушел (курсор при этом не двигается в сторону закрытия вкладки).

накрутка ПФ просмотр визита в Вебвизоре

Вот другой визит с Win 10, Google Chrome, за день до примера выше:

аналогичный визит в Вебвизоре

Если у ботов нет функции со случайным воспроизведением разных действий, тогда все визиты будут однотипными. Клики по одним и тем же ссылками или кнопкам, переходы в разделы, прокрутка, положение курсора. Всё это говорит о том, что у посетителя отсутствует реальный интерес к контенту.

— Положение курсора XY

В течение всего визита курсор может находиться в одном положении. Например, в углу экрана или в выставленной позиции по оси XY.

положение курсора

— Один регион на всех

Всех подобных посетителей может объединять одно: регион. Для информационных запросов геоположение пользователя, как правило, не имеет значения. Такие запросы относятся к категории геонезависимых, при которых поисковая выдача одинаково релевантна вне зависимости от того, откуда сделан запрос.

геоположение визитов с ботами

— Низкая конверсия

В данном случае мы подразумеваем рекламу или коммерцию. Боты скликивают рекламные объявления и накручивают визиты по коммерческим запросам, могут добавлять товары в корзину (выполнять одно из целевых действий), но не завершать весь путь по воронке.

Как восстановить позиции после санкций

Жалоба в Яндекс (нужны скрины)

Подайте жалобу в поддержку поисковой системы с доказательствами фродовой активности. Сделать это можно на странице справки Яндекса Ранжирование или Безопасность и нарушения.

По рекомендациям Яндекса, ожидание восстановления занимает 8-12 месяцев, если вопрос будет решен в вашу пользу.

Предотвратить поток недействительных визитов

Рекомендуется до или уже после атаки подключить инструменты защиты (платные или бесплатные), которые будут блокировать ботам доступ к сайту.

Как защитить сайт от накрутки ПФ

Для защиты страниц сайта от поведенческих ботов и борьбы с накруткой разных параметров конкурентами, можно использовать следующие способы:

1. Отрезать трафик с нецелевых ресурсов

Если вы заметили резкое увеличение визитов из соцсетей или с сайтов, которые не могут приводить столько пользователей по единому пулу запросов, заблокируйте таким пользователям доступ.

Сделать это можно на сервере (через .htaccess, nginx конфигурации). Так вы запретите доступ по рефереру или user-agent, если запрос пришёл с адреса запрещённого сайта или соцсети.

2. Блокировать по IP (может быть неэффективно)

Вы можете попробовать блокировать визиты с вредоносных IP-адресов. Это трудозатратно, поскольку анализировать придется логи сервера, и не всегда эффективно. Операторы бот-ферм прибегают к ротации IP-адресов, чтобы снизить риск обнаружения. Кроме того, если один IP блокируется, они просто меняют его на новый.

3. Подключить капчу

Подключение CAPTCHA (желательно поведенческой, которая работает в фоновом режиме), помогает блокировать ботам доступ к страницам и формам. Можно использовать Умную капчу от Botfaqtor.

настройка капчи

4. Блокировка устаревших user-agent

Простые боты используют устаревшие user-agent, которые легко распознаются. Ограничьте доступ для устаревших версий браузеров и операционных систем.

Однако, продвинутые боты могут маскироваться под современные легитимные user-agent, поэтому блокировка по UA — лишь один из элементов защиты.

5. Клин клином (не рекомендуется)

Некоторые отчаявшиеся SEO-специалисты заказывают на сайт накрутку по нецелевым запросам, чтобы снизить долю переходов, которые указывают на манипуляции с позициями под определенные запросы. Есть риск просесть по всем запросам и получить бан.

6. Антифрод-инструменты

Подключите автоматизированный инструмент верификации трафика из поиска. Например, Антибот от Botfaqtor. Сервис антифрода в фоновом режиме анализирует каждый визит по 100+ техническим и поведенческим параметрам, профилю пользователя и блокирует доступ к сайту в случае обнаружения фродового паттерна. 

Эти методы и инструменты защищают сайт от накруток и наложения на случайный ресурс санкций за манипуляции с поведенческими факторами.


Подписывайтесь на наш ТГ-канал: рассказываем о реальных кейсах, тактиках и технологиях мошенников, факты о кликфроде и не только. Без спама и с пятничными мемами.


Об авторе

Алёна Быкова

Пишу о ботах и кибербезопасности

Просмотреть все сообщения

Добавить комментарий