Індексація

Що це означає

Індексація - процес, під час якого пошуковик знаходить сторінку, завантажує її, обробляє вміст і зберігає у своїй базі, індексі. Лише сторінки в індексі можуть з’явитися в результатах пошуку. Якщо сторінку не проіндексовано, для пошуку її не існує, яким би якісним не був контент.

Процес має дві фази. Спершу робот пошуковика знаходить сторінку й обходить її, зазвичай через посилання з інших сторінок або через карту сайту. Потім оцінює, чи варто включити її до індексу: чи вона унікальна, корисна і технічно доступна.

Пошуковик не зобов’язаний індексувати все, що знайшов. Сторінки з дубльованим чи дуже бідним контентом, заблоковані у файлі robots.txt або позначені забороною індексації, а також сторінки, чия канонічна адреса вказує в інше місце, до індексу не потраплять.

Як це працює на практиці

Для нового сайту чи розділу ми радимо перевірити в інструментах для вебмайстрів, скільки сторінок проіндексовано і чому деякі ні. Часті причини - забута заборона індексації з тестової версії, помилкові перенаправлення чи дублі.

На багатомовному сайті кожна мовна версія має бути проіндексована і пов’язана через hreflang. Сторінки словника, як ця, генеруються статично, щоб пошуковик завантажував їх швидко і повністю, не чекаючи на скрипти.

Швидкість завантаження і технічна якість, які вимірюють і Core Web Vitals, впливають на те, як часто і як глибоко пошуковик обходить сайт. Повільний сайт із тисячами сторінок може індексуватися лише частково.

На що звернути увагу

Найчастіша і найдорожча помилка - запустити новий сайт із залишеною забороною індексації з тестової версії. Фірма тижнями чекає відвідувачів, які не прийдуть, а попередній органічний трафік втрачається.

Другий ризик - прагнення індексувати все, зокрема фільтри, внутрішній пошук і порожні сторінки. Пошуковик витрачає час на марні адреси і може пропустити важливі сторінки. Менше, але якісніших сторінок в індексі працює краще.