# Слишком широкий запрет в robots.txt убрал упоминания в ИИ | Illia BizTech

> Запрет оптом для ИИ-роботов способен убрать упоминания и не тронуть обучение. Всё решают имена конкретных роботов.

Source: https://illia-biztech.de/ru/forum/unser-dienstleister-sagt-die-sperre-habe-mit-den-verlorenen-nennungen-nichts-zu-tun

1. [Главная](/ru)
2. [Форум](/ru/forum)
3. Подрядчик уверяет, что запрет и пропавшие упоминания никак не связаны

# Подрядчик уверяет, что запрет и пропавшие упоминания никак не связаны

Запрет ставили против обучения, а исчезли именно упоминания.

* ##### Спросил(а)  
RustyTurbine405
* ##### Задан  
September 24, 2026

Мы поставляем лабораторное оборудование. Весной 2026 года подрядчик прописал в robots.txt несколько запрещающих строк для ИИ-роботов, чтобы наши тексты не уходили в обучение.

С лета нас перестали называть в ответах ассистентов, хотя раньше мы там появлялись регулярно. Подрядчик говорит, что связи никакой нет.

#### Ответы

![Портрет Ильи Беличенко, технического специалиста Illia BizTech](/_ipx/f_webp,q_75/https://cms.illia-biztech.de/uploads/small_Illia_Belichenko_author_81f88864f0.png)

##### Illia Belichenko · Основатель и технический руководитель

✓ Принятый ответ September 25, 2026 

Связь, скорее всего, прямая. У каждого крупного сервиса несколько роботов с разными именами, и от имени зависит, на что влияет запрет. Поэтому запрет оптом почти всегда бьёт мимо цели.

В документации OpenAI OAI-SearchBot описан как тот, благодаря которому страницы появляются в поисковых функциях ChatGPT, и там же сказано, что исключённые страницы в этих ответах не показываются, хотя как навигационные ссылки появляться могут. GPTBot отвечает за обучающие данные. Тому, кто хотел закрыть только обучение, из этих двух нужен был ровно один.

У Anthropic имён три. На странице от 7 апреля 2026 года перечислены ClaudeBot для обучающих данных, Claude-User для заходов, вызванных вопросом человека, и Claude-SearchBot для качества поиска. Здесь упоминание тоже держится на другом имени, чем обучение.

Возьмите актуальный список имён у каждого сервиса отдельно, поскольку адреса страниц иногда меняются, и сверьте его со своим файлом построчно. Это ручная работа на одно утро. Вернулась ли компания в эти ответы, можно замерить, и такой замер делает [отчёт о видимости в ИИ](https://illia-biztech.de/ru/ki-sichtbarkeitsbericht) у Illia BizTech.

##### 

#### [У страницы компании есть администраторы, которых никто не знает, и заявка висит](/ru/forum/unsere-unternehmensseite-hat-administratoren-die-niemand-kennt-und-die-anfrage-bleibt-liegen)

September 23, 2026

[](/ru/forum/unsere-unternehmensseite-hat-administratoren-die-niemand-kennt-und-die-anfrage-bleibt-liegen)

#### [После перехода на профессиональный аккаунт профиль стал открытым и все заявки приняты](/ru/forum/nach-dem-umstellen-auf-ein-unternehmenskonto-wurde-unser-profil-offentlich-und-alle-offenen-anfragen-wurden-angenommen)

September 23, 2026

[](/ru/forum/nach-dem-umstellen-auf-ein-unternehmenskonto-wurde-unser-profil-offentlich-und-alle-offenen-anfragen-wurden-angenommen)

#### [Каждое утро ищу наше объявление, и с некоторых пор оно у меня не показывается](/ru/forum/ich-suche-jeden-morgen-nach-unserer-anzeige-und-seit-einiger-zeit-finde-ich-sie-nicht-mehr)

September 22, 2026

[](/ru/forum/ich-suche-jeden-morgen-nach-unserer-anzeige-und-seit-einiger-zeit-finde-ich-sie-nicht-mehr)

#### [У новой сотрудницы все права на странице, и она всё равно никуда не попадает](/ru/forum/die-neue-kollegin-hat-alle-rechte-auf-der-seite-und-kommt-trotzdem-nirgends-hinein)

September 22, 2026

[](/ru/forum/die-neue-kollegin-hat-alle-rechte-auf-der-seite-und-kommt-trotzdem-nirgends-hinein)

#### [В планировщике у наших запросов стоит ноль](/ru/forum/im-keyword-tool-steht-bei-unseren-begriffen-eine-null)

September 21, 2026

[](/ru/forum/im-keyword-tool-steht-bei-unseren-begriffen-eine-null)

**Поделиться** 

**Темы** 
* robots.txt
* Видимость в ИИ

У каждого сервиса упоминание в ответах держится не на том имени, на котором держится обучение. В документации OpenAI робот для поисковых функций отделён от робота для обучающих данных. У Anthropic имён три, и последствия у всех трёх разные.

Из-за этого работа с видимостью в ИИ сводится к ведению списка имён. Строка, рассчитанная сразу на всех, убирает упоминание, а обучение нередко оставляет как было. Списки публикуют сами сервисы и время от времени их правят, поэтому построчная сверка остаётся единственной надёжной проверкой.