Политика ИИ-краулеров
РекомендуемыйПравила robots.txt для GPTBot, Google-Extended, ClaudeBot и других.
SEO-инструментыБесплатно и онлайн
Загрузка инструмента...
Об этом инструменте
Группы User-agent для ИИ-ботов отдельно от Googlebot. Пресеты: разрешить всех, запретить обучение или запретить ИИ, оставив поиск.
Как использовать
- Выберите пресет или переключите ботов.
- Скачайте robots.txt в корень сайта.
Возможности
GPTBot и ChatGPT-User
Google-Extended и Googlebot
ClaudeBot
Perplexity и CCBot
Пресеты обучения
Sitemap