Проверка индексации сайта в Google и Яндексе: пошагово

Что такое индексация и почему страница может в неё не попасть

Индексация — это добавление страницы в базу поисковой системы. Сначала робот узнаёт об адресе, затем загружает страницу, а потом решает, стоит ли её хранить и показывать в выдаче. На каждом шаге что-то может сорваться, поэтому «страница опубликована» и «страница есть в поиске» — разные вещи.

Типичная ситуация для владельца бизнеса в Ташкенте или в регионах: вы добавили на сайт новую услугу, прошло время, а по её названию вас никто не находит. Прежде чем переписывать тексты или запускать рекламу, проверьте, видит ли поисковик саму страницу.

Проверка индексации в Google Search Console

Подключите сайт в Search Console и откройте отчёт об индексировании страниц. Он делит адреса на проиндексированные и исключённые и объясняет причину. Смотрите не только на общее число, а на то, какие именно разделы попали в исключённые: страницы услуг, карточки товаров или блог.

Для отдельного адреса используйте инструмент проверки URL. Он показывает, есть ли страница в индексе, когда её сканировали в последний раз и какой канонический адрес выбрал Google. После исправления проблемы отсюда же можно отправить запрос на повторное индексирование.

Яндекс Вебмастер

В Вебмастере откройте раздел со страницами в поиске: там видно, что находится в базе Яндекса, что исключено и по какой причине, а также историю изменений. Для отдельной страницы есть проверка статуса адреса.

Часть аудитории, особенно русскоязычной, по-прежнему ищет через Яндекс, поэтому ограничиваться одним Google не стоит.

Быстрые способы: оператор site: и поиск по заголовку

Запрос site:вашсайт.uz показывает часть страниц из индекса. Это удобно, чтобы за минуту понять, жив ли сайт в поиске, но число результатов приблизительное, а точные данные нужно брать из отчётов поисковиков.

Второй приём — вставить в поиск точный заголовок страницы в кавычках. Если сайт в индексе, а этой страницы нет, проблема точечная. Если нет вообще ничего, ищите общую причину: закрытый robots.txt, тег noindex, оставшийся после разработки, или недоступный сервер.

Для крупного сайта, например каталога интернет-магазина, сравните список адресов из карты сайта с отчётом об индексации. Так сразу видно, каких важных страниц в индексе нет.

Как читать статусы в отчётах

Формулировки в отчётах похожи, но означают разное.

• «Обнаружена, но не проиндексирована» — робот знает об адресе, но ещё не загрузил страницу. Часто причина в слабых внутренних ссылках или в размере сайта.
• «Просканирована, но не проиндексирована» — робот страницу видел и решил не добавлять. Обычно это вопрос качества: мало текста, повторы, нет пользы для читателя.
• «Дубль» или «дубль без канонической» — поисковик выбрал основной другую страницу.
• «Страница с переадресацией» — адрес ведёт на другой, в индексе останется конечный.

Что делать, если важной страницы нет в индексе

Не каждое исключение — проблема. Страницы фильтров, корзины и внутреннего поиска часто и должны оставаться вне индекса. Важно, чтобы исключение не задевало страницы, которые приводят клиентов. Для таких страниц пройдите по списку:

• Нет ли noindex и запрета в robots.txt.
• Отдаёт ли страница код 200, а не 404 или 500.
• Куда ведёт canonical — он не должен указывать на другую страницу без причины.
• Есть ли адрес в карте сайта и ссылки на него с важных страниц.
• Уникален ли контент: описания товаров, скопированные у поставщика, индексируются хуже.
• Отправлен ли запрос на повторное индексирование после правок.

Как встроить проверку в рутину

Смотрите отчёты после запуска новых разделов, смены структуры, переезда на другую CMS или домен. В остальное время хватит беглого просмотра раз в месяц. Новый сайт индексируется дольше, поэтому не паникуйте через пару дней, но и не ждите месяцами без проверки. Если трафик из поиска упал, начинайте диагностику именно с индексации.

Если хотите разобраться, почему ваши страницы не попадают в поиск, команда markdev поможет с SEO-оптимизацией сайта в Узбекистане: проверим индексацию, технические причины и контент. Напишите нам, и мы обсудим вашу задачу.