Webcache видає помилку 404

Виявилася проблема, сторінка існує і візуально нормально відображається, а ось пошуковий робот не може її прочитати (просканувати). Дивно, але так буває.

Під час проведення первинного аудиту сайту за допомогою Screaming Frog і Serpstat, проблему не було виявлено, але пошукова консоль на очах показує значне падіння трафіку, водночас виключено варіант накладення санкцій або фільтрів.

Раз уперше проблема була виявлена в Search Console, то й відштовхуємося від неї. Вибираємо будь-яку сторінку, виключену з індексу, і сторінку, яка ще в ньому присутня, і перевіряємо їх за допомогою оператора «cache:». Виявляється, обидві сторінки мають 404 відповідь від webcache.googleusercontent.com.

Повертаємося в консоль і проводимо перевірку цих двох URL, після вивчаємо проскановану сторінку.

Як виявилося, проблема ховалася в ресурсах сторінки, з 50 одиниць довантажувалося тільки 2 (на скріні проблема здебільшого вже усунена).

Яка причина, що так вийшло, це вже індивідуальне питання. Потрібно зрозуміти чому пошукова система не може завантажити решту 48 ресурсів, тому що саме через це сторінки сайту стрімко почали випадати з індексу.

Ось чому так важливо стежити за тим, як пошуковий робот сканує і бачить сайт.

Корисні статті