Справочник ботов · ИИ-поиск и ответы

Claude-SearchBot: что это за бот и как его закрыть

Робот поиска Claude: анализирует страницы, чтобы ответы поиска в Claude были точнее и релевантнее.

ВладелецAnthropic
ТипИИ-поиск и ответы
Имя в User-Agent и robots.txtClaude-SearchBot
Документацияофициальная страница

Соблюдает ли Claude-SearchBot robots.txt

Соблюдает robots.txt. По документации Anthropic, запрет для Claude-SearchBot убирает контент сайта из поисковой оптимизации Claude и может снизить его видимость в ответах.

Как ограничить Claude-SearchBot

Добавьте в конец файла robots.txt в корне сайта:

User-agent: Claude-SearchBot
Disallow: /

Поисковые роботы Яндекса и Google это правило не затрагивает. Готовые наборы правил для всех ИИ-ботов — в бесплатной проверке.

Видно ли Claude-SearchBot в Яндекс Метрике

Как правило, нет: такие роботы забирают HTML страницы, а счётчики работают на JavaScript. Поэтому узнать, пускает ли их сайт, можно только проверкой от их имени — её делает бесплатная проверка.

Открыт ли ваш сайт для Claude-SearchBot?

Бесплатная проверка покажет, что видят Claude-SearchBot и ещё 14 ИИ-ботов: правила robots.txt и реальный ответ вашего сервера.

ИИ-поиск и ответы: другие боты