OpenAI Aura блокирует доступ ChatGPT к некоторым сайтам без объяснения причин
OpenAI применяет внутреннюю систему безопасности Aura, которая решает, может ли инструмент просмотра веб-страниц открыть конкретный сайт. Если сайт попадает в блоклист, ChatGPT live search и Codex Browser Use не откроют его, даже если доступ разрешён в robots.txt.
Главное в цифрах
- Срок хранения ответа системы о блокировке: 24 часа
- Краулер OpenAI для обучения: GPTBot
По данным Search Engine Journal, Aura проверяет сайты через внутренний статус-запрос к chatgpt.com/backend-api/aura/site_status. Если ресурс помечен как заблокированный, решение сохраняется локально на 24 часа. Настройки пользователя и правила robots.txt в этом случае не учитываются.
Публичного способа узнать причину блокировки или подать апелляцию сейчас нет. Официальные справочные страницы говорят о глобальном блоклисте по соображениям безопасности и комплаенса, а также о блокировке сайтов, связанных с незаконной деятельностью. Подробности работы системы OpenAI не раскрывает.
Агенты просмотра и краулеры
Блокировка касается только агентов просмотра. Поисковые и обучающие краулеры OpenAI, включая GPTBot, OAI-SearchBot и ChatGPT-User, работают по своим правилам и публикуют IP-адреса. Владельцам сайтов важно не путать эти механизмы при диагностике.
По словам автора материала, в его практике издатель с открытым robots.txt столкнулся с тем, что ChatGPT не загружал страницы, а серверные логи не фиксировали ни одного запроса от ChatGPT. Тесты в Codex показали, что Browser Use отказывался открывать сайт из-за правил site-safety. Служба поддержки OpenAI в переписке подтвердила активную блокировку и передала вопрос во внутренние команды для проверки, была ли она намеренной.
Что это значит для владельцев сайтов
Если сайт пропадает из ответов ChatGPT, стоит проверить, не попал ли он под ограничения агентов просмотра. Сейчас у владельца нет автоматического инструмента для проверки статуса и подачи апелляции, поэтому диагностика опирается на тесты и обращения в поддержку.
