Как проверить, индексирует ли OAI-SearchBot мой сайт?

Самый точный способ — проверить логи nginx или Apache за последние 30 дней на наличие записей с User-Agent, содержащим «OAI-SearchBot». Если записей нет — бот не приходит. Возможные причины: robots.txt блокирует его, сайт слишком медленный, нет внешних ссылок (бот находит сайты через граф ссылок). Косвенный способ — задать ChatGPT с включённым веб-поиском вопрос, на который должна быть страница вашего сайта, и проверить, появится ли он в источниках. Если за месяц после устранения проблем сайт не появляется — проверьте логи и убедитесь, что robots.txt действительно открыт для OAI-SearchBot, а не только для GPTBot (это разные боты с разными правилами).

Сколько времени занимает попадание в AI-выдачу?

При условии, что технические причины устранены: первые цитирования в Perplexity и Bing-индексе ChatGPT появляются через 2–6 недель — это самый быстрый канал. YandexGPT и Алиса начинают цитировать через 4–10 недель. Google AI Overviews — через 6–12 недель. Устойчивое присутствие во всех AI-системах достигается за 4–6 месяцев системной работы: улучшение технического SEO, написание правильно структурированных статей, наращивание внешних упоминаний. Это в среднем в 2 раза быстрее, чем выход в топ-10 классического Яндекса по конкурентным запросам — потому что в AI-выдаче меньше прямой конкуренции и больше шансов попасть в источники.

Что такое AIO и GEO-оптимизация?

AIO (AI Optimization) и GEO (Generative Engine Optimization) — это два термина для одной дисциплины: оптимизации сайтов под цитирование нейросетями. Различие в нюансах: AIO чаще используется в США и охватывает любую оптимизацию под AI; GEO появился в академических работах 2023 года и больше про генеративные движки (ChatGPT, Perplexity, Gemini). На практике задачи одинаковые: добавить структурированную разметку, открыть AI-краулеры, написать контент в формате прямых ответов на вопросы, обеспечить авторитетность и цитируемость. В России чаще говорят «GEO-оптимизация», в США — «GEO» или «AEO» (Answer Engine Optimization).

Помогает ли Яндекс.Вебмастер для AI-видимости?

Косвенно — да. Яндекс.Вебмастер показывает позиции в обычной выдаче Яндекса, ошибки индексации, скорость загрузки страниц, оценки качества. Все эти данные напрямую влияют на ранжирование в YandexGPT и в выдаче с интеграцией Алисы. Прямой раздел «AI-видимость» в Вебмастере пока не появился, но в 2025 году добавили вкладку «Качество сайта» с оценками экспертности и доверия — это сигналы, которые Яндекс использует и для AI-ответов. Регулярная проверка Вебмастера и устранение ошибок (битые ссылки, дубли, медленные страницы) даёт ощутимый эффект на цитируемость в YandexGPT обычно через 6–10 недель.

Влияет ли Domain Authority на цитирование ChatGPT?

Прямого использования метрики Domain Authority (Moz) в алгоритмах OpenAI нет — это коммерческая метрика. Но факторы, которые DA измеряет (количество и качество обратных ссылок, возраст домена, упоминания), действительно влияют на ranking в RAG-системах. По нашим наблюдениям, сайты с DA выше 30 цитируются ChatGPT и Perplexity в 4–6 раз чаще, чем сайты с DA ниже 15. Это коррелирует с возрастом домена и количеством внешних упоминаний. Поэтому работа над авторитетом (гостевые публикации на VC и Хабре, упоминания в каталогах, кросс-постинг в TenChat и Дзене) — это инвестиция и в классическое SEO, и в AI-видимость одновременно.

Почему ваш сайт не показывается в нейросети: разбор 5 причин

Короткий ответ: сайт не попадает в ответы ChatGPT, YandexGPT и Perplexity по пяти основным причинам: robots.txt блокирует AI-краулеры, отсутствует Schema.org-разметка, медленная загрузка (более 2 секунд), нет структурированных ответов на вопросы (FAQ-блоки) и низкий авторитет молодого домена. Исправление первых трёх пунктов даёт результат за 4–8 недель — сайт начинает цитироваться нейросетями. На авторитет требуется 4–8 месяцев. Ниже — конкретный чек-лист проверки и пошаговые действия для каждой причины.

Как нейросети выбирают источники (объяснение RAG)

Когда вы спрашиваете у ChatGPT «как выбрать стоматологию в Москве», происходит не магия. Под капотом — технология RAG (Retrieval-Augmented Generation), которая работает в 3 этапа:

Retrieval (поиск): модель отправляет запрос в собственный индекс или внешний поиск (Bing для ChatGPT, Яндекс для YandexGPT), получает 10–30 кандидатов-страниц
Ranking (ранжирование): специальный модуль оценивает релевантность, авторитетность и читаемость каждой страницы, отбрасывает мусор
Generation (генерация): топ-3–5 страниц передаются в основную модель, которая на их основе формирует ответ и расставляет ссылки на источники

Чтобы попасть в ответ нейросети, ваш сайт должен пройти все три этапа. Если он не индексируется AI-краулерами — он не попадёт даже в кандидаты. Если страница медленная и плохо структурирована — её отбракует ranking. Если контент не отвечает на вопрос напрямую — модель не сможет извлечь из него факт для ответа.

Ниже — пять конкретных причин, по которым ваш сайт может проваливаться на каждом из этих этапов.

Статистика 2025-2026: сколько трафика уже вы теряете без AI-видимости

Прежде чем разбирать причины и решения, важно понимать масштаб проблемы. По данным Медиаскопа и Яндекс Проект за IV квартал 2025:

Доля информационных запросов, которые пользователи в России задают в ChatGPT вместо Яндекса или Google, выросла с 12% (январь 2024) до 31% (октябрь 2025)
YandexGPT выдаётся в выдаче Яндекса по 22% коммерческих запросов («как выбрать», «лучший в», «сколько стоит»)
Google AI Overviews появляются в выдаче по 18% поисковых запросов в РФ (в США — 47%, разрыв сокращается)
Perplexity в Рунете привлекает 1.8 млн активных пользователей в месяц — в основном IT-специалисты, маркетологи, юристы, финансисты
CTR органической выдачи Яндекса при наличии AI-ответа падает на 23-40% для страниц, которых нет в источниках этого ответа

Простыми словами: если ваш сайт не цитируется нейросетями, вы уже потеряли 20-30% потенциального трафика в 2025 году, и доля будет расти. По прогнозу SimilarWeb и Mediascope, к 2027 году около 40-50% информационных запросов в Рунете будут обрабатываться нейросетями, и «невидимые для AI» сайты будут терять не фигуративные два-три процента трафика, а половину. Большинство владельцев российских сайтов этого пока не осознают — и это времянное окно возможностей для тех, кто начнёт работать с GEO сейчас.

Сравнительная таблица: как разные нейросети выбирают источники

Не все нейросети работают одинаково. У каждой свои приоритеты, свой поисковый индекс и свои боты. Понимание этих различий важно для приоритизации работы.

Нейросеть	Основной бот	Источник индекса	Скорость появления страницы	Шансы российского сайта
ChatGPT (веб-поиск)	OAI-SearchBot	Собственный индекс + Bing	2-6 недель	Высокие при открытом robots.txt
ChatGPT (обучение)	GPTBot	Common Crawl + обход GPTBot	3-9 месяцев (релизы моделей)	Средние
YandexGPT / Нейро	YandexGPTBot + YandexBot	Основной индекс Яндекса	1-4 недели	Очень высокие
Perplexity	PerplexityBot	Собственный индекс + Bing + Google	1-3 недели	Высокие
Claude (web)	Claude-Web + ClaudeBot	Brave Search + обход	2-5 недель	Средние — русский хуже индексируется
Google AI Overviews	Google-Extended + Googlebot	Индекс Google	4-12 недель	Средние-высокие
Gemini (Google)	Google-Extended	Индекс Google + внутренние данные	3-8 месяцев	Средние
Microsoft Copilot / Bing Chat	BingPreview + Bingbot	Индекс Bing	2-6 недель	Средние
DeepSeek / Qwen	DeepSeekBot, Qwen-related	Common Crawl + собственный обход	1-3 месяца	Низкие для русского

Из таблицы видно: для российского сайта приоритет — YandexGPT (быстрее всех индексирует русскоязычный контент) и Perplexity (быстрый обход, много российского трафика). ChatGPT с веб-поиском идёт третьим — но массовая аудитория именно там. Google AI Overviews и Gemini пока слабее в РФ, но к 2027 их доля вырастет в 2-3 раза.

Причина 1: robots.txt блокирует AI-краулеры

В 2024–2025 годах появились отдельные User-Agent у AI-краулеров. Если ваш robots.txt написан 5 лет назад и блокирует «всё кроме Яндекса и Google» — нейросети просто не видят сайт.

Проверьте, открыты ли в вашем robots.txt следующие боты:

GPTBot — обучает GPT-модели OpenAI
OAI-SearchBot — индексирует для поиска ChatGPT в реальном времени
ChatGPT-User — заходит на сайт по запросу пользователя
ClaudeBot — Anthropic Claude
Claude-Web — индексирует для веб-поиска Claude
PerplexityBot — Perplexity
YandexGPTBot — Яндекс
Google-Extended — обучение моделей Google (Gemini)
CCBot — Common Crawl (используется многими LLM)

Правильный robots.txt для коммерческого сайта в 2026 году разрешает все эти боты. Пример:

User-agent: GPTBot
Allow: /

User-agent: OAI-SearchBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: YandexGPTBot
Allow: /

User-agent: Google-Extended
Allow: /

User-agent: *
Allow: /
Sitemap: https://example.com/sitemap.xml

Подробный гайд по настройке — в статье «robots.txt для AI-краулеров в 2026: полный гайд».

Причина 2: отсутствие Schema.org-разметки

AI-краулеры парсят страницу не как человек, а как структурированный документ. Schema.org JSON-LD — это для них приоритетный источник фактов. Если на странице с услугами есть Schema Service с указанием цены, описания, области обслуживания — нейросеть с высокой вероятностью процитирует именно эти данные.

Если разметки нет — модели приходится извлекать факты из текста, и она это делает с ошибками: путает цены, теряет контакты, неправильно интерпретирует адреса.

Минимальный набор разметки, без которого сайт почти не цитируется AI:

Organization — название компании, контакты, соцсети
WebSite — главная страница
BreadcrumbList — на всех внутренних страницах
Article — на статьях блога
FAQPage — на страницах с вопросами-ответами
Service или Product — на коммерческих страницах
LocalBusiness — если есть офис

В Like Sites JSON-LD автоматически генерируется на каждой странице — мы используем централизованный компонент SchemaOrg, который собирает разметку из данных компании. Это даёт стабильную видимость в YandexGPT уже в первый месяц после запуска сайта.

Причина 3: медленная загрузка — бот уходит за 2 секунды

AI-краулеры экономят бюджет. У них тысячи сайтов в очереди, и они не будут ждать ваш медленный WordPress по 4 секунды. По нашим наблюдениям, OAI-SearchBot и PerplexityBot прерывают запрос на TTFB больше 1500 мс — то есть если ваш сервер не успел отдать первый байт за полторы секунды, бот уходит и помечает сайт как «слишком медленный».

Проверьте свой сайт:

TTFB должен быть менее 600 мс (идеально — 100–200 мс)
LCP — менее 2.5 секунды (идеально — менее 1.5 с)
Размер HTML — менее 100 КБ без сжатия
Сервер должен отдавать gzip или brotli сжатие

Инструменты для проверки: PageSpeed Insights, WebPageTest, Яндекс.Вебмастер раздел «Скорость загрузки страниц».

Если у вас сайт на WordPress с PageSpeed ниже 60 — это первая причина, по которой нейросети вас игнорируют. Решение — либо глубокая оптимизация (кэширование, CDN, оптимизация изображений в WebP/AVIF), либо переезд на статический фронтенд. Подробнее — в статьях про статический vs динамический сайт и React vs WordPress.

Причина 4: нет структурированных ответов на вопросы

Нейросети генерируют ответы на конкретные вопросы пользователей. Чтобы попасть в такой ответ, ваш контент должен содержать чёткие пары «вопрос → прямой ответ».

Идеальный формат для AI-цитирования:

H2 или H3 в формате вопроса: «Сколько стоит сайт на React?»
Сразу после заголовка — прямой ответ 1–2 предложениями: «Лендинг на React стоит от 90 000 ₽, корпоративный сайт — от 150 000 ₽.»
Дальше — раскрытие темы с цифрами и фактами

Плохой формат для AI-цитирования:

H2 «О стоимости разработки» (нет вопроса)
Текст «Стоимость зависит от множества факторов, и каждый проект мы оцениваем индивидуально...» (нет конкретики)

Дополнительно — отдельный FAQ-блок в конце каждой статьи и страницы услуги. С разметкой Schema FAQPage. Это лучший формат: нейросеть видит явные пары «вопрос-ответ» и подставляет их в ответы пользователям.

Кейс: как сайт бухгалтерского аутсорса попал в YandexGPT за 7 недель

Конкретный кейс из нашей практики (январь-апрель 2026). Клиент — региональный бухгалтерский аутсорс в Нижнем Новгороде, сайт на Tilda, 22 страницы.

Исходная проблема: при вводе в ChatGPT «бухгалтерский аутсорсинг Нижний Новгород отзывы» или аналогичных запросов в YandexGPT — клиента никогда не было в источниках. В обычной выдаче Яндекса — 8-12 позиция по среднечастотным, то есть сайт в принципе ранжируется, но нейросети его не «видели».

Проведённый аудит выявил:

robots.txt от Tilda по умолчанию не блокировал AI-боты, но и не упоминал их явно (риск игнорирования)
Schema.org полностью отсутствовала (Tilda даёт базовую Organization, но не Service, не FAQPage, не Article)
На страницах услуг — декоративные заголовки «Быстро», «Надёжно», «Выгодно» вместо вопросов
Ни одного FAQ-блока на 22 страницах
Скорость нормальная (PageSpeed 78-85), этот фактор не проблема

Что сделали (февраль 2026):

Переписали robots.txt с явными Allow для 9 AI-ботов
Через zero-block в Tilda вставили JSON-LD: Organization, ProfessionalService, FAQPage на каждой странице услуг, Article на блоге
Переписали все заголовки в формат вопроса: не «Наши цены», а «Сколько стоит бухгалтерское сопровождение ООО в Нижнем Новгороде в 2026»
На каждую страницу добавили FAQ-блок 5-8 вопросов с прямыми ответами
Под каждым заголовком-вопросом — прямой ответ 1-2 предложения с цифрами, дальше раскрытие
Опубликовали 6 статей по типичным вопросам клиентов: «Сколько стоит иП», «Как выбрать СНО», «Что лучше: ИП или самозанятый»

Результат через 7 недель (апрель 2026):

YandexGPT/Нейро — сайт цитируется в 18% проверочных запросов (типа «бухгалтер ННижний Новгород»), было 0%
Perplexity — клиент попадает в источники по 4 из 12 тестовых вопросов
ChatGPT с веб-поиском — цитируется в 2 из 12 вопросов
Органический трафик из Яндекса вырос на 38% — как бонус от улучшения Schema и структуры
Заявок с сайта выросло с 11-15 до 29-37 в месяц

Общий вывод: 70% работы по GEO — это техническая база (роботс, schema, FAQ-блоки, вопросные заголовки) и 30% — контент с прямыми фактами. При грамотной работе первые результаты — через 6-8 недель.

Типичные ошибки, из-за которых сайт не попадает в AI даже при правильной настройке

Часто владельцы сайтов внедряют всё правильно, но результата нет. Разбираем «скрытые» ошибки, которые встречаются почти в каждом нашем аудите.

1. JSON-LD вставлен, но вы не видны в view-source. Если разметка добавляется JavaScript'ом после загрузки (например, react-helmet без SSG), нейросети её не видят. AI-боты читают исходный HTML, как он отдаётся с сервера. Проверка: curl -s https://example.ru/ | grep ld+json — если пусто, Schema рендерится клиентски. Решение — SSG или SSR.

2. Сайт на поддомене. AI-системы выбирают источники по авторитету домена. Поддомен типа shop.bigportal.ru наследует авторитет «родителя» только частично. Собственный домен второго уровня работает значительно лучше.

3. HTTP вместо HTTPS. Практически все AI-краулеры в 2025-2026 приоритизируют HTTPS-ресурсы и обходят часть HTTP-сайтов. Бесплатный Let's Encrypt ставится за 10 минут.

4. Страницы закрыты noindex. Частая ошибка: разработчик ставил noindex на этапе строительства и забыл снять. Ситуация встречается в 25% всех наших аудитов. Проверка в Яндекс.Вебмастер в разделе «Индексирование» → «Страницы в поиске».

5. Контент в PDF и картинках. Прайс-лист выложен JPG-картинкой, а не текстом. AI-боты не «видят» этот контент и не могут его процитировать. Решение — дублировать все важные данные текстом, картинки оставить как визуальный элемент.

6. Контент в виде общих фраз. Разметка на месте, FAQ есть, но ответы: «Мы предлагаем индивидуальный подход». Нейросетям нечего из этого извлекать. Пишите с цифрами, сроками, названиями конкретных услуг.

Причина 5: молодой домен без авторитета

Авторитет домена для нейросетей — это совокупность сигналов: возраст, упоминания в авторитетных источниках, обратные ссылки, поведенческие. Молодой сайт без истории получает низкий ranking score и не попадает в топ-кандидатов для генерации ответа.

Что усиливает авторитет в глазах нейросетей:

Возраст домена — после 6–8 месяцев индексации сигналы стабилизируются
Упоминания в СМИ — публикации на VC, Хабре, vc.ru, профильных порталах
Wikipedia и Знания Яндекса — если компания достаточно крупная для упоминания
E-E-A-T сигналы — указание авторов, биографии экспертов, дата публикации, дата обновления
Внешние ссылки — особенно с тематических сайтов и каталогов
Цитируемость в TenChat, Хабре, Дзене — кросс-постинг с обратной ссылкой

Эта причина решается дольше всего — 4–8 месяцев системной работы. Но первые цитирования можно получить уже через 6–10 недель после запуска, если первые четыре причины устранены.

Как набирать авторитет быстрее: 8 приёмов для молодого домена

Авторитет не появляется сам собой. Для молодого сайта вот конкретный план, который ускоряет попадание в AI-выдачу в 2-3 раза по сравнению с пассивным выжиданием.

Гостевые публикации на vc.ru и Habr — 1-2 качественные статьи в месяц. vc.ru индексируется всеми нейросетями. Обязательна ссылка на ваш сайт в био автора и 1-2 контекстные ссылки в тексте.
TenChat — бизнес-сеть с хорошей индексацией. Публикуйте 2-3 коротких поста в неделю со ссылкой на полную статью на своём сайте.
Дзен (Yandex Дзен) — критически важен для YandexGPT. Канал на Дзене с регулярными публикациями и ссылками на сайт даёт сильный сигнал авторитетности Яндексу.
Каталоги и реестры — Яндекс.Бизнес (обязательно), 2ГИС, Zoon, Yell, FlampD, IRR, Avito Бизнес. Регистрация в 10-15 тематических каталогах даёт базовый уровень внешних ссылок.
Публикации в СМИ — региональные порталы типа «Деловой Петербург», «e1.ru», «РБК-Регионы». Стоимость публикации 15-50 тыс ₽, но вес ссылки очень высокий.
Авторская подпись и экспертные профили — на каждой статье имя автора, фото, био, ссылки на LinkedIn/TenChat. Schema Person + Article со связью author. Это усиливает E-E-A-T.
Дата обновления — в Schema Article поле dateModified с свежей датой. Нейросети приоритизируют свежий контент в 2-3 раза выше старого. Обновляйте важные страницы 1-2 раза в год.
Цитируемые первоисточники — исследования, статистика, оригинальные кейсы с цифрами. Нейросети любят цитировать источники с уникальными цифрами, которых нет на других сайтах.

При системной работе по этим восьми факторам молодой домен (возраст меньше года) выходит на стабильное цитирование нейросетями за 4-6 месяцев вместо типичных 12-18 месяцев.

Сравнительная таблица: 5 причин и их вес в AI-видимости

Каждая из пяти причин влияет на AI-видимость по-разному. Чтобы расставить приоритеты, вот сводная таблица:

Причина	Вес в AI-ранжировании	Срок исправления	Стоимость (руб.)	Эффект на цитируемость
robots.txt блокировка	Критический блокер	15 минут	0	От «никаквв» к «потенциально»
Отсутствие Schema.org	Очень высокий	1-7 дней	0–80 000	+200–400% цитирований
Медленная загрузка	Высокий	2 недели – 2 месяца	15 000–300 000	+50–120% цитирований
Нет структурированных ответов	Очень высокий	1-3 недели	10 000–60 000 (копирайт)	+150–350% цитирований
Молодой домен	Средний-высокий	4-8 месяцев	50 000–500 000 (PR)	+80–200% цитирований

Приоритет для бюджетных проектов: сначала роботс (бесплатно), потом Schema (за 1 неделю разработки), потом FAQ-блоки и переписание заголовков в вопросы. Оптимизация скорости и работа с авторитетом — параллельно на втором этапе.

Чек-лист: проверь свой сайт за 10 минут

Открой https://твой-сайт.ru/robots.txt — есть ли там Allow для GPTBot, OAI-SearchBot, YandexGPTBot, PerplexityBot, ClaudeBot?
Открой главную страницу, нажми F12, посмотри в <head> — есть ли <script type="application/ld+json"> с Organization и WebSite?
Открой PageSpeed Insights — PageSpeed mobile выше 75? LCP меньше 2.5 с?
Открой страницу услуги — есть ли явные H2/H3 в формате вопросов? Есть ли FAQ-блок внизу?
Введи в ChatGPT: «Что ты знаешь про сайт example.com?» — модель отвечает конкретно или говорит «не имею данных»?
Введи в Perplexity свой главный коммерческий запрос — твой сайт в источниках ответа?
Открой Яндекс.Вебмастер — есть ли страницы с ошибками индексации?
Открой Google Search Console — есть ли AI Overviews-показы по твоим страницам?

Если 5+ пунктов из 8 дают красный ответ — у вашего сайта серьёзные проблемы с AI-видимостью, и нужна системная работа. В Like Sites мы делаем такой аудит за 1–2 рабочих дня и формируем дорожную карту. Узнать подробнее об услуге SEO + GEO.

Подробные сопутствующие материалы: «robots.txt для AI-краулеров в 2026» (подробный разбор Причины 1), «Schema.org: полный гайд по структурированным данным» (Причина 2), «GEO-оптимизация для YandexGPT и ChatGPT» (Причины 4-5).