Справочник ботов · Парсеры и скрипты

HeadlessChrome в логах сайта: что это и как ограничить

Chrome, запущенный без окна, — так работают Puppeteer, Playwright и Selenium. Такой браузер выполняет JavaScript, поэтому, в отличие от простых парсеров, попадает в Яндекс Метрику и может выполнять цели, кликать по рекламе и накручивать поведенческие факторы.

ВладелецChrome без интерфейса
ТипПарсеры и скрипты
Имя в User-Agent и robots.txtHeadlessChrome

Соблюдает ли HeadlessChrome robots.txt

Браузер без интерфейса robots.txt не читает. Слово HeadlessChrome в User-Agent легко заменить на обычное — тогда по названию бота не отличить, и нужны поведенческие признаки.

Как ограничить HeadlessChrome

robots.txt здесь не поможет: скрипт может его не читать. Ограничивайте на сервере, например в nginx:

if ($http_user_agent ~* "HeadlessChrome") {
    return 403;
}

Но название в User-Agent меняется одной строкой кода — опытный парсер представится обычным браузером. Тогда помогают только поведенческие признаки.

Видно ли HeadlessChrome в Яндекс Метрике

Да, и в этом опасность: браузер без интерфейса выполняет счётчики, поэтому такие визиты попадают в Метрику как обычные — с отказами, целями и кликами по рекламе. Отличить их можно только по поведению и окружению браузера: это и делает Трафло.

Проверьте свой сайт

Бесплатно и без регистрации: счётчики, защита от ботов, robots.txt и доступ нейросетей — за 20 секунд.

Парсеры и скрипты: другие боты