Роботы и боты в отчётах Метрики: как отсечь и очистить статистику

Робот в отчётах — не катастрофа, но это то, что искажает решения. Если 25% визитов нереальные, ваш «показатель отказов» врёт, конверсия выглядит хуже, чем есть, а автостратегии Директа учатся на мусорных данных. Хорошая новость — Метрика умеет ботов ловить, надо просто включить нужные галочки и научиться читать отчёт «Роботы».

01Какие боты приходят на сайт

Принципиально это три группы, и они ведут себя по-разному:

• Полезные краулеры — YandexBot, GoogleBot, Bingbot. Они индексируют сайт. Их Метрика обычно не показывает в отчётах, потому что они не выполняют счётчик.
• SEO-краулеры конкурентов — Ahrefs, Semrush, MJ12 и многочисленные клоны. Они тоже редко доходят до Метрики, но могут грузить сервер.
• «Серый» автоматический трафик — накрутчики поведенческих, фейк-рефералы, парсеры, простые headless-браузеры. Именно они отображаются в Метрике как обычные визиты с подозрительно ровным или подозрительно странным поведением.

Первые две группы лечатся на уровне сервера и robots.txt — это про техническое SEO. С третьей разбирается сама Метрика, и о ней этот материал.

02Как Метрика помечает робота

Под капотом — комбинация сигналов:

• проверка JavaScript, мыши, скролла, фокуса вкладки;
• анализ заголовков и устройства;
• поведенческие паттерны: подозрительно ровные интервалы, отсутствие движений курсора, мгновенный закрытие вкладки;
• сопоставление с базой известных бот-сетей.

На основе этих сигналов Метрика выставляет визиту коэффициент «роботности». Чем он выше, тем вероятнее, что перед нами автоматика. В стандартных отчётах роботный трафик уже скрыт — но не всегда полностью, и об этом ниже.

03Базовая защита: фильтрация в настройках счётчика

В «Настройка → Фильтры» каждого счётчика есть две ключевые опции. Их стоит включить сразу.

Фильтрация роботов по строгим правилам

Самый агрессивный режим — Метрика выкидывает из отчётов всё, что хоть отдалённо напоминает робота. Минус: иногда выкидывает живых людей с экзотическими браузерами или агрессивными антифинг-расширениями.

Фильтрация роботов только по строгим правилам и поведению

Балансовый вариант, рекомендуемый по умолчанию. Лишних людей теряется меньше, реальных ботов отсекается достаточно.

Для большинства сайтов второй вариант оптимален. Если вы видите волну фейк-трафика и решения важнее, чем отдельные потерянные визиты, временно включите строгий режим — а после успокоения вернитесь к стандартному.

04Отчёт «Роботы»: куда смотреть

В Метрике есть стандартный отчёт «Отчёты → Стандартные → Мониторинг → Роботы». Он показывает, сколько визитов было идентифицировано как роботные и по каким признакам. Регулярная проверка этого отчёта важна по двум причинам:

• Если доля роботов резко выросла, скорее всего, сайт начали парсить или накручивать — это сигнал для админа.
• Если доля внезапно упала до нуля, возможно сломалась антибот-логика, и в ваших обычных отчётах теперь сидят боты, которых вы не видите.

Подробнее про родственный механизм очистки — в материале фильтр спам-трафика в Метрике: как очистить отчёты.

05Поведенческие признаки бота своими глазами

Даже без отчёта «Роботы» подозрительный трафик легко увидеть по поведению. Признаки, которые должны насторожить:

• показатель отказов уходит к 95–100% на каких-то конкретных источниках;
• время на сайте — ровно 0:00 или ровно 0:15 у целой когорты визитов;
• сотни визитов с разных IP, но с одинаковым неконвертирующим путём;
• трафик из стран и регионов, которым ваш бизнес физически не интересен;
• взрыв «прямых заходов» без рекламной активности.

Чтобы не разбираться с этим вручную каждый день, заведите сегмент «подозрительный трафик» в Метрике и регулярно сверяйтесь. Подробнее о метрике, по которой это всё всплывает — в статье что такое показатель отказов и какой считается нормой.

06Что делать с волной фейк-трафика

Если фейк уже идёт, чек-лист короткий:

• включите в счётчике строгую фильтрацию роботов и оставьте её на время атаки;
• создайте сегмент-исключение «не роботы» и включайте его при анализе отчётов;
• проверьте источники: если фейк льётся с конкретных utm или рефералов, исключите их в Метрике и через файрвол;
• обязательно отключите эти источники в автостратегиях Директа, чтобы реклама не училась на фейке.

Главная опасность ботов — не лишняя нагрузка, а испорченное обучение автостратегий. Реклама честно учится на том, что ей дали, и начинает «оптимизироваться» под ботов.

07Профилактика и регулярная гигиена

Полностью убрать ботов с сайта нельзя — интернет так устроен. Но можно держать ситуацию под контролем: раз в месяц смотрите долю роботного трафика, сверяйте показатель отказов и сегментируйте сомнительные источники. Это занимает 20 минут и сильно влияет на качество решений по рекламе и SEO.

Если делать руками лень — это естественная часть подписки на дизайн и аналитику: фильтры в счётчике, чистка отчётов и сегменты-исключения настраиваются один раз и поддерживаются дальше без вашего участия.

Официальная документация по теме — Справка Яндекс.Метрики.