Applebot: как работает робот Apple и как его проверить
По документации Apple, обеспечивает поиск в продуктах Apple — Spotlight, Siri и Safari. Открытый Applebot позволяет сайту появляться в их результатах. Собранные им данные Apple может использовать и для обучения своих моделей.
| Владелец | Apple |
|---|---|
| Тип | Поисковые роботы |
| Имя в User-Agent и robots.txt | Applebot |
| Документация | официальная страница |
Соблюдает ли Applebot robots.txt
Apple предлагает управлять Applebot через robots.txt. Чтобы запретить обучение моделей, но остаться в поиске Apple, есть отдельный токен Applebot-Extended.
Нужно ли закрывать Applebot
Закрывать Applebot не нужно: сайт пропадёт из поиска Apple. Если хотите ограничить отдельные разделы — используйте Disallow только для них.