Индексация

Что это значит

Индексация - процесс, при котором поисковик находит страницу, скачивает её, обрабатывает содержимое и сохраняет в своей базе, индексе. Только страницы в индексе могут появиться в результатах поиска. Если страница не проиндексирована, для поиска её не существует, каким бы качественным ни был контент.

У процесса две фазы. Сначала робот поисковика находит страницу и обходит её, обычно через ссылки с других страниц или через карту сайта. Затем оценивает, стоит ли включить её в индекс: уникальна ли она, полезна и технически доступна.

Поисковик не обязан индексировать всё, что нашёл. Страницы с дублирующимся или очень скудным контентом, заблокированные в файле robots.txt или помеченные запретом индексации, а также страницы, чей канонический адрес указывает в другое место, в индекс не попадут.

Как это работает на практике

Для нового сайта или раздела мы советуем проверить в инструментах для вебмастеров, сколько страниц проиндексировано и почему некоторые нет. Частые причины - забытый запрет индексации из тестовой версии, ошибочные перенаправления или дубли.

На многоязычном сайте каждая языковая версия должна быть проиндексирована и связана через hreflang. Страницы словаря, как эта, генерируются статически, чтобы поисковик загружал их быстро и целиком, не дожидаясь скриптов.

Скорость загрузки и техническое качество, которые измеряют и Core Web Vitals, влияют на то, как часто и как глубоко поисковик обходит сайт. Медленный сайт с тысячами страниц может индексироваться лишь частично.

На что обратить внимание

Самая частая и самая дорогая ошибка - запустить новый сайт с оставшимся запретом индексации из тестовой версии. Фирма неделями ждёт посетителей, которые не придут, а прежний органический трафик теряется.

Второй риск - стремление индексировать всё, включая фильтры, внутренний поиск и пустые страницы. Поисковик тратит время на бесполезные адреса и может пропустить важные страницы. Меньше, но качественнее страниц в индексе работает лучше.