В конце октября Google тихо обновил документ, который читают немногие: руководство по защите сайта от спама. Новый раздел называется «Индексируйте только то, что предназначено для поиска». Звучит как очевидность, но у него есть адресат — сайты, где пользователи сами создают страницы: результаты генераторов, расшаренные отчёты, интерактивные инструменты. Если у вас на сайте есть калькулятор, конструктор или сервис, который выдаёт ссылку на результат, это про вас.
Что именно добавил Google
Обновление от 26 октября 2026 года касается платформ, которые дают пользователям публиковать «страницы для шеринга, сгенерированные результаты или интерактивные инструменты». Google разделяет страницы на два вида: созданные для того, чтобы их находили в поиске, и созданные для прямой передачи по ссылке, совместной работы или как утилита. Для второго вида рекомендация прямая: по умолчанию применять noindex или закрывать обход в robots.txt.
- Закрывать такие страницы от индексации по умолчанию.
- Следить в Search Console за неожиданными скачками числа проиндексированных страниц.
- На уровне платформы отслеживать ситуацию, когда небольшое число пользователей создаёт большую долю индексируемых адресов.
Google объясняет обновление так: оно помогает платформам держать вне индекса пользовательские страницы, которые не предназначены для поиска, и раньше замечать спам. Об этом пишет Search Engine Journal.
Почему это важно именно сейчас
Спамеры давно используют чужие сервисы как бесплатный хостинг: генерируют тысячи страниц через публичный конструктор, вставляют туда ссылки и ключевые слова, и всё это индексируется на чужом домене с хорошей репутацией. Для владельца сервиса это заканчивается плохо: поиск видит на домене массу мусорных страниц и начинает хуже относиться ко всему сайту. Сентябрьский спам-апдейт закончился 8 октября, и новый раздел выглядит как продолжение той же линии.
Для страниц-результатов я выбираю noindex. robots.txt подходит, когда таких адресов миллионы и важно не тратить на них обход, — например, у крупного конструктора сайтов
Если пользователи могут создавать страницы на вашем домене, вы отвечаете за то, что из этого попадёт в индекс.
Что закрывать, а что оставить
Главная ошибка, которую я ожидаю после этой новости, — закрыть всё подряд. Страница инструмента и страница с результатом его работы — разные вещи.
| Тип страницы | Индексировать? | Почему |
|---|---|---|
| Страница инструмента: калькулятор, генератор, проверка | Да | Отвечает на поисковый запрос «калькулятор…», «проверить…» |
| Результат расчёта по уникальной ссылке | Нет | Нужен одному человеку, для поиска это пустая копия |
| Отчёт, которым делятся по ссылке | Нет | Создан для передачи, а не для поиска |
| Пользовательские страницы на конструкторе сайтов | По умолчанию нет | Открывать вручную, когда владелец подтверждён и страница наполнена |
| Черновики, предпросмотры, совместные документы | Нет | Служебные страницы |
| Страницы с параметрами фильтров и сортировок | Как правило, нет | Каноническая страница категории закрывает спрос |
Как это устроено у меня
На nasloy.ru около двадцати пяти бесплатных инструментов: генераторы, калькуляторы, проверки. Сами страницы инструментов открыты для поиска — по ним люди и приходят. Результаты расчётов отдельных адресов не получают, они существуют только в браузере посетителя, поэтому индексировать там нечего.
В моём анализаторе SEOSimple есть отчёты, которыми делятся по ссылке. Они с самого начала отдают метатег noindex, nofollow: человек может переслать отчёт коллеге, но в поиск такие страницы не попадают. Новое руководство Google ровно об этом.
noindex или robots.txt: что выбрать
Google упоминает оба способа, но они работают по-разному, и путать их опасно.
- noindex — метатег robots или заголовок X-Robots-Tag. Робот заходит на страницу, видит запрет и не включает её в индекс. Это надёжный способ.
- robots.txt запрещает обход, а не индексацию. Если на страницу ведут ссылки с других сайтов, она может попасть в индекс без содержимого. Search Console покажет её со статусом «Проиндексировано, несмотря на блокировку в файле robots.txt».
- Нельзя сочетать запрет в robots.txt и noindex на одной странице: робот не дойдёт до страницы и не увидит noindex.
Для страниц-результатов я выбираю noindex. robots.txt подходит, когда таких адресов миллионы и важно не тратить на них обход, — например, у крупного конструктора сайтов.
Проверка за 20 минут
- Выпишите все типы адресов, которые создаёт ваш сайт без участия редактора: результаты, отчёты, профили, черновики.
- Откройте по одному адресу каждого типа и проверьте метатег robots и заголовок X-Robots-Tag.
- В Search Console, в отчёте «Индексирование страниц», посмотрите динамику числа проиндексированных страниц за три месяца. Резкий рост без новых разделов — сигнал.
- Поиском по сайту (site:ваш-домен плюс характерная часть адреса) проверьте, не попали ли результаты в индекс.
- Если попали — поставьте noindex и подождите переобхода. Закрывать их в robots.txt в этот момент нельзя, иначе робот не увидит noindex.
Ограничения
- Это рекомендация из документации, а не новый алгоритм. Google не объявлял, что будет понижать сайты именно за открытые страницы для шеринга.
- Раздел адресован прежде всего платформам с пользовательским контентом. Обычному сайту услуг без генераторов и личных кабинетов делать почти ничего не нужно.
- Для Яндекса правила те же по смыслу: noindex он понимает, а результаты генераторов ценности для его индекса тоже не несут.
Проверить, открыта ли конкретная страница для индексации, можно в проверке индексируемости URL. Если на сайте есть сервис или конструктор и нужно разобраться, что из него видит поиск, напишите — посмотрю в рамках SEO-аудита.