Видят ли ваш сайт ИИ-ассистенты
Проверим страницу так, как её видят боты ChatGPT, Perplexity, Claude, Яндекса и Google: открыта ли она в robots.txt, не режет ли ботов защита хостинга и есть ли текст без JavaScript.
- Бесплатно
- Без регистрации
- 14 ботов
- 20–30 секунд
Что проверяем
robots.txt для каждого бота
Какая секция сработала и какое правило закрыло бота — со строкой файла.
Ответ сервера ботам
Запрос с именем ботов ChatGPT, Perplexity и Claude рядом с обычным браузером.
Защита и CDN
Страницы проверки, капча, коды 403 и 429 — то, что robots.txt не покажет.
Текст без JavaScript
Сколько слов видит бот, который не выполняет скрипты, и как выглядит страница для него.
noindex и X-Robots-Tag
Запрет индексации в коде страницы или заголовке ответа сервера.
Ответы отдельно от обучения
Боты, которые приводят посетителей, и боты, которые собирают данные для обучения моделей.
Как пользоваться
- Вставьте адрес важной страницы — услуги, категории, статьи.
- Посмотрите итог: красные пункты мешают попасть в ответы нейросетей.
- Откройте детали: какое правило robots.txt закрыло бота и что сервер ответил каждому.
- Проверка: видят ли страницу боты ChatGPT, Perplexity, Claude, Яндекса и Google
- Каких ботов закрывать можно, а каких нельзя
- Как писать текст, который нейросети цитируют
Как читать результат
Боты разделены на три группы — от этого зависит, что будет, если их закрыть.
| Группа | Боты | Если закрыть |
|---|---|---|
| Поиск и ответы | OAI-SearchBot, PerplexityBot, Claude-SearchBot, YandexBot, Googlebot, Bingbot | Сайт пропадёт из ответов этого сервиса — закрывать не стоит |
| Чтение по запросу | ChatGPT-User, Perplexity-User, Claude-User | Ассистент не сможет открыть страницу, когда о ней спросят. Часть таких ботов robots.txt не соблюдает |
| Обучение моделей | GPTBot, ClaudeBot, Google-Extended, Applebot-Extended, CCBot | Тексты не попадут в обучение. На показ в ответах не влияет — решение владельца |
Частые ошибки
Закрыли всех ИИ-ботов одной строкой
Вместе с ботами обучения закрываются и поисковые — сайт исчезает из ответов ChatGPT и Perplexity.
Включили «блокировать ИИ-ботов» в CDN
robots.txt открыт, а защита отдаёт ботам 403 или капчу. Владелец об этом не знает годами.
Текст рисуется скриптами
Сайт на React, Vue или конструкторе без серверного рендеринга — бот видит пустую страницу.
Вопросы
Почему проверка ботов по robots.txt и по ответу сервера отличается?
robots.txt — просьба к боту, а защита хостинга или CDN может отказать боту ещё до того, как он прочитает правила. Бывает и наоборот: robots.txt закрывает бота, а сервер отвечает. Поэтому проверяем оба слоя.
Нужно ли открывать ботов для обучения моделей?
Это решение владельца. Боты обучения (GPTBot, ClaudeBot, Google-Extended) не влияют на показ в ответах — за него отвечают поисковые боты: OAI-SearchBot, PerplexityBot, Claude-SearchBot, а для Алисы и Gemini — обычные YandexBot и Googlebot.
Что значит «текст без JavaScript»?
Большинство ИИ-ботов не выполняют скрипты. Если основной текст появляется только после загрузки JavaScript, бот увидит пустую страницу и не сможет её процитировать.
Закрою GPTBot — пропаду из ChatGPT?
Нет. GPTBot собирает данные для обучения моделей OpenAI. За показ сайта в ответах поиска ChatGPT отвечает OAI-SearchBot — его закрывать не стоит.
Видит ли проверка блокировку по IP-адресам ботов?
Нет: запрос идёт с сервера СеоГарда, а не с адресов OpenAI или Perplexity. Проверка показывает блокировки по имени бота (User-Agent). Блокировки по IP видны только в логах вашего сервера.
Проверьте весь сайт, а не одну страницу
СеоГард обходит все страницы сайта, сверяет их с данными Яндекс Вебмастера и Метрики и собирает найденное в задачи со списком страниц. Демо — бесплатно и без срока.