ChatGPT (GPTBot) Краулер OpenAI, используемый для обучения моделей GPT.

ChatGPT User Используется, когда пользователь просит ChatGPT просмотреть вашу страницу.

Google Gemini (Google-Extended) Используется Google для обучения Gemini и Vertex AI (не влияет на SEO).

Google Other Общий краулер Google для внутренних нужд и R&D.

Claude (Anthropic) Краулер Anthropic для обучения моделей Claude.

Anthropic AI Общий краулер Anthropic.

Apple Intelligence Позволяет Apple использовать контент для обучения ИИ (Apple Intelligence).

Perplexity AI Краулер поисковой системы Perplexity AI.

Meta (FacebookBot) Краулер Meta, используется для распознавания речи и обучения LLaMA.

Бесплатный Генератор Robots.txt - Блокировка AI-Ботов, ChatGPT и Скраперов

Сообщить о проблеме