Индексация небольшого сайта: почему страницы не попадают в поиск и что делать

Страница вне индекса не может занять позицию, попасть в ответ нейросети или привести хотя бы одного посетителя из поиска. У небольших и новых сайтов проблемы с индексацией — одна из самых частых причин того, что «SEO не работает». Хорошая новость: у большинства таких проблем есть понятная причина и скучное, но рабочее решение.

Как устроена индексация

Поисковик находит адреса по ссылкам, из sitemap и уведомлений, обходит страницы, решает, стоит ли каждую хранить, и только после этого может её показать. Google прямо пишет в описании того, как работает Поиск, что не гарантирует сканирование, индексацию и показ страницы, даже если она соответствует правилам. Яндекс принимает такие же решения и описывает в справке, по каким причинам исключает страницы из поиска. Индексация — выбор поисковика, а не услуга, которую покупают отправкой sitemap.

Яндекс: Вебмастер и исключённые страницы

Начните с Яндекс Вебмастера: добавьте и подтвердите сайт, отправьте sitemap и посмотрите отчёт о страницах в поиске. Как это сделать с нуля, мы разобрали в статьях как добавить сайт в Яндекс и Яндекс Вебмастер для начинающих. В отчёте у каждой исключённой страницы указана причина. Частая у небольших сайтов — «малоценная или маловостребованная страница». Что она означает и как склеивать дубли, Яндекс объясняет в справке о малоценных страницах, а мы — в статье малоценные страницы в Яндексе.

Изменённую страницу можно отправить на переобход. Яндекс поддерживает и IndexNow — открытый протокол, которым сайт сообщает поисковикам о новых и изменённых адресах; список участвующих поисковиков есть на indexnow.org. Как ускорить индексацию без серых приёмов, читайте в статье как ускорить индексацию в Яндексе, а если сайт не появляется в поиске совсем — в разборе почему сайт не индексируется Яндексом.

Google: отчёт об индексировании страниц

В Search Console отчёт об индексировании страниц перечисляет причины, по которым известный Google адрес не в индексе. Больше всего вопросов вызывают два статуса:

• «Обнаружена, не проиндексирована». Google знает адрес, но ещё не сканировал страницу. У небольшого сайта это обычно значит, что у Google пока мало причин тратить на неё время: на страницу мало внутренних ссылок или сайт новый и малоизвестный.
• «Просканирована, но пока не проиндексирована». Google загрузил страницу и пока решил её не индексировать. В справке к отчёту сказано, что такой адрес может попасть в индекс позже, а повторно отправлять его не нужно. Обычно помогает работа над самой страницей: сделать её полезнее и непохожей на другие.

Для отдельной страницы есть инструмент проверки URL: он показывает, что Google знает о странице, и позволяет запросить индексирование. Ежедневные запросы не помогут, помогает устранение причины.

Что помогает почти любому небольшому сайту

• Ссылки на важные страницы с живых страниц. Страница, доступная только через sitemap, выглядит неважной. Ставьте ссылки с главной, разделов и похожих статей обычными тегами <a href>.
• Чистый sitemap. Только канонические индексируемые адреса с ответом 200, без редиректов, закрытых и служебных страниц. Карта должна обновляться сама при публикации новых материалов.
• Меньше дублей и пустых страниц. Метки, почти одинаковые записи и адреса с параметрами размывают сайт.
• Техническая база. Нет случайного noindex, важное не закрыто в robots.txt, canonical указывает на саму страницу, она отвечает кодом 200 и грузится быстро. Про скорость без жаргона — в статье Core Web Vitals для небольших сайтов.
• Упоминания на других сайтах. Внешние ссылки — один из способов, которыми поисковики находят страницы. Здесь помогают партнёрства, гостевые статьи и обмен статьями; подробнее — в разделе продвижение сайта.

Чем здесь поможет Satelo

Satelo ничего не индексирует за вас, и честно пообещать индексацию не может никто. Партнёрские статьи в сети Satelo дают помеченную ссылку на ваш сайт с тематических страниц, то есть ещё один путь к нему для читателей. Бесплатная проверка сайта покажет возраст домена, ссылочные сигналы и то, есть ли сайт в открытых наборах данных вроде Chrome UX Report.

Проверить сайт бесплатно

Бесплатные инструменты: Проверка ИИ-ботов

Индексация в Яндексе

Техническая база небольшого сайта

Частые вопросы

Почему сайт не индексируется Яндексом?

Частые причины: сайт не добавлен в Вебмастер, нет sitemap, страницы закрыты в robots.txt или noindex, много дублей и малоценных страниц, на новые страницы нет внутренних ссылок. Причину исключения конкретной страницы показывает Вебмастер.

Что значит «малоценная или маловостребованная страница»?

Это статус исключения в Яндекс Вебмастере: Яндекс решил не показывать страницу в поиске. Что он означает и как работать с дублями, описано в справке Вебмастера о малоценных страницах.

Нужно ли повторно отправлять страницу «Просканирована, но не проиндексирована»?

В справке Google сказано, что такой адрес может быть проиндексирован позже и повторно отправлять его не нужно. Полезнее доработать саму страницу и внутренние ссылки на неё.

Помогает ли IndexNow?

IndexNow сообщает поисковикам, которые его поддерживают (в том числе Яндексу), о новых и изменённых адресах. Это ускоряет обнаружение, но не гарантирует попадание страницы в индекс.

Сколько времени занимает индексация нового сайта?

Фиксированного срока нет, и поисковики не гарантируют индексацию. Быстрее находят сайты с sitemap, хорошей внутренней перелинковкой и упоминаниями на других сайтах.

Может ли Satelo проиндексировать мои страницы?

Нет, честно пообещать индексацию не может ни один сервис. Партнёрские статьи Satelo добавляют помеченные ссылки на ваш сайт с тематических страниц, а бесплатная проверка показывает ссылочные сигналы и возраст домена. Сервис в публичной бете.