Старт · урок 1 из 3

Как сайт попадает в поиск и AI-ответы

Путь страницы от публикации до показа: обход, рендеринг, индекс, ранжирование и цитирование в AI-ответах. Без этой карты любая оптимизация — гадание.

  • Уровеньбаза
  • Время12 мин
  • Для когоСобственник, Маркетолог, SEO-специалист

После урока вы сможете

  • Объяснить, на каком этапе страница «застряла», по данным Search Console и Вебмастера
  • Отличить проблему индексации от проблемы ранжирования
  • Понять, почему AI-ответ может цитировать конкурента при ваших позициях

Когда страница не появляется в поиске, первое желание — переписать текст или купить ссылки. Я с этим не спешу. Путь страницы до выдачи — цепочка из шести звеньев, и порвана она обычно в одном месте. Пока не найдено это место, любая работа над текстом может уйти в пустоту. Этот урок — карта цепочки и способ быстро найти разрыв.

Шесть звеньев

ЗвеноВопросГде проверить
1. ОбнаружениеЗнает ли робот об адресеsitemap.xml, внутренние ссылки, отчёт «Страницы в поиске» в Вебмастере
2. ДоступПускают ли его на страницуrobots.txt, код ответа сервера, защита от ботов
3. СодержимоеВидит ли он текстИсходный код страницы без JavaScript
4. ИндексацияПринял ли он эту версию как основнуюcanonical, noindex, отчёт об исключённых страницах
5. РанжированиеСчитает ли страницу лучшим ответомПозиции, сравнение с выдачей по запросу
6. Цитирование в AIБерёт ли ассистент из неё фрагментыКонтрольные вопросы ассистентам

Идти нужно строго сверху вниз. Если страницы нет в индексе, обсуждать её ранжирование бессмысленно. Если робот получает ошибку 403, бессмысленно обсуждать индексацию.

Где цепочка рвётся чаще всего

  • Обнаружение: на страницу нет ни одной внутренней ссылки, её нет в карте сайта. Типично для посадочных страниц, сделанных «для рекламы».
  • Доступ: забытый запрет после разработки или защита хостинга, которая не пускает часть роботов.
  • Индексация: canonical указывает на другую страницу, и поиск честно индексирует ту, на которую указали.
  • Ранжирование: страница отвечает не на тот вопрос. По запросу «стоимость ремонта» в выдаче калькуляторы и прайсы, а у вас статья о том, как выбрать бригаду.

Разбор на примере: новая услуга, которой нет в поиске

Условная клиника открыла направление и сделала страницу. Через два месяца страница не получает ни одного визита из поиска. Проверка по цепочке заняла 20 минут:

ЗвеноРезультат проверки
ОбнаружениеСтраницы нет в sitemap.xml, из меню на неё не ведёт ни одна ссылка — только из рекламы
ДоступКод 200, robots.txt не мешает
СодержимоеТекст есть в исходном коде
ИндексацияВ Вебмастере: «Страница неизвестна роботу»

Разрыв на первом звене. Добавили страницу в меню раздела и в карту сайта, отправили на переобход. Через 9 дней страница в индексе, через месяц — 140 визитов из поиска. Текст при этом не трогали.

Чем AI-ответы отличаются от обычного поиска

Для ответов ассистентов к шести звеньям добавляются два условия. Первое: у AI-систем свои роботы, и доступ им нужно проверять отдельно. Второе: ассистент берёт не страницу целиком, а фрагмент, поэтому ключевые факты должны быть сформулированы так, чтобы их можно было процитировать без контекста. Об этом подробнее в модуле GEO и в треке «Техническое SEO и AI-поиск».

Сначала найдите, где порвалась цепочка. Потом чините именно это звено. Текст — пятое звено из шести, а не первое.

Где спотыкаются чаще всего

  • Отправлять страницу на переобход, не устранив причину. Робот придёт, увидит то же самое и уйдёт снова.
  • Смотреть только на Google. В России Яндекс индексирует иначе и медленнее, его отчёты надо проверять отдельно.
  • Путать «нет в индексе» и «нет в топе». Первое — техническая проблема, второе — вопрос соответствия запросу и конкуренции.
  • Проверять одну страницу и делать выводы о сайте. Проблема на шаблоне затрагивает сотни адресов, поэтому проверяйте по одной странице каждого типа.

Пошагово: проверка за полчаса

  1. Выберите по одной странице каждого типа: главная, раздел, услуга или товар, статья.
  2. Для каждой пройдите шесть звеньев из таблицы и запишите, где ответ «нет».
  3. Сверьте с отчётом об исключённых страницах в Вебмастере: какие причины там самые частые.
  4. Найденный разрыв опишите одной фразой: «страницы услуг не попадают в индекс, потому что canonical указывает на главную».
  5. Исправьте именно это звено и через две недели повторите проверку.

Проверить звенья для конкретного адреса можно в проверке индексируемости URL.

Практика

Сделайте на своём сайте

0 / 5

Отметки сохраняются в этом браузере — можно вернуться к заданию позже.

Частые ошибки

Лечить позиции, когда страницы нет в индексе

Контент и ссылки не помогут странице, которую поиск не забрал. Сначала статус, потом всё остальное.

Верить, что «сайт на React — это нормально для SEO» без проверки

Если текста нет в исходном HTML, часть роботов его не увидит. Проверяется за минуту.

Инструменты к уроку

Следующий урок →