Навчання
Як виправити помилки сканування в Google Search Console
Помилки сканування й індексації тихо тримають сторінки поза Google. Цей гайд пояснює звіти Search Console і як виправити найпоширеніші причини.
Запусти свіжий аудит DomainLens і використовуй звіт як список пріоритетів.
Що насправді означають «помилки сканування»
Помилка сканування означає, що Googlebot намагався відкрити URL і щось пішло не так, або сторінка була доступна, але Google вирішив її не індексувати. У Google Search Console це переважно у звіті «Індексування сторінок», де вказано, чому кожен URL є чи немає в індексі.
Не кожен виключений URL — проблема: деякі сторінки й не мають бути в індексі. Мета — відділити навмисні виключення від реальних помилок, що коштують тобі трафіку.
Де їх знайти в Search Console
Відкрий звіт «Індексування сторінок», щоб побачити проіндексовані й непроіндексовані URL, згруповані за причиною. Використовуй «Перевірку URL» для окремої сторінки, щоб побачити останнє сканування, індексованість і блокувальні сигнали. Звіт «Статистика сканування» (у Налаштуваннях) показує відповіді сервера, які отримував Googlebot.
Починай із причин, що зачіпають найбільше URL — виправлення однієї причини часто очищає десятки сторінок одразу.
Поширені помилки сканування й індексації
- Помилки сервера (5xx) — Googlebot не зміг завантажити сторінку через проблему сервера.
- Не знайдено (404) — на URL є посилання чи він відомий, але вже не існує.
- Помилки редиректів — ланцюги чи цикли редиректів, що не завершуються.
- Заблоковано в robots.txt — сканування заборонено, тож Google не читає сторінку.
- Виключено через «noindex» — meta-тег чи заголовок забороняє індексацію.
- Проскановано, але не проіндексовано — Google бачив сторінку, але не вважав вартою індексу.
Як виправити кожну причину
Підбирай виправлення під причину. Для 5xx — стабілізуй сервер або виправ помилку застосунку. Для небажаних 404 — віднови сторінку або постав 301 на правильний URL. Для помилок редиректів — скороти ланцюги, щоб старий URL вів прямо до кінцевого. Для блоків robots.txt чи noindex — прибирай директиву лише на сторінках, які справді хочеш в індексі.
«Проскановано, але не проіндексовано» зазвичай сигналізує про якість чи дублювання: покращ контент, зроби його унікальним і підсиль внутрішні посилання, щоб Google вважав сторінку вартою.
Помилки, що погіршують ситуацію
- Масово запитувати індексацію замість усунення першопричини.
- Блокувати URL у robots.txt, щоб «прибрати» — це лише заважає Google побачити noindex.
- Перенаправляти всі 404 на головну, що Google вважає soft 404.
- Ігнорувати «Виявлено, але не проіндексовано» на великих сайтах — часто сигнал crawl-бюджету.
- Виправляти по одному URL замість спільної першопричини.
Як допомагає DomainLens
Search Console показує, які сторінки зачеплені; DomainLens допомагає побачити чому на конкретному URL. Він показує HTTP-статус, ланцюги редиректів, директиви robots і noindex та canonical-ціль — саме ті сигнали, що стоять за більшістю виключень з індексу — і пояснює кожен простими словами.
Перевір проблемний URL, виправ те, що позначив звіт, а потім через «Перевірку URL» у Search Console запроси нове сканування й підтверди виправлення.
Наступні кроки
Опрацьовуй звіт «Індексування сторінок» від найбільшої проблеми вниз, валідуй кожне виправлення і перевіряй щомісяця, щоб нові помилки не накопичувалися тихо.
Запусти безкоштовний аудит DomainLens на будь-якому URL, що застряг як непроіндексований, щоб точно знайти блокувальний сигнал, перш ніж просити Google пересканувати.