Звіт про заблоковані ресурси або як Googlebot бачить вашу сторінку

Пошукові алгоритми постійно модернізуються і видозмінюються, на зміну старим фільтрам приходять нові, прагнучи максимально покращити пошукову видачу і як наслідок оптимізаторам диктують все нові і нові правила якості ресурсів.

У старі добрі часи для пошукових систем головним фактором ранжирування була наявність і доступність тексту на сторінці, а Javascript і CSS файли не враховувалися, тим самим більшість оптимізаторів закривали такі файли в robots.txt. Однак часи змінюються і пошукові системи прагнуть максимально точно оцінювати зміст сторінки/сайту з точки зору користувача.

Тепер Google рекомендує не приховувати картинки, файли: JavaScript, CSS в robots.txt і надати Googlebot повний доступ до індексації, попереджаючи, що за відсутності доступу до даних файлів, система може невірно розпізнати сторінку/сайт і тим самим це негативно вплине на рейтинг сайту в пошуковій видачі Google . Докладніше тут « Webmaster Central Blog ». Тому нещодавно в Google Webmaster з'явився додатковий інструмент, який дозволяє діагностувати заблоковані файли/хости. При просуванні київських сайтів, один із них був взятий за приклад і розглянутий, на «живу» це виглядає так:

У звіті будуть представлені всі технічні зауваження та способи вирішення проблем, які потребують коригування.

Після внесення всіх рекомендованих зауважень до файлу robots.txt, можна подивитися як відображатиметься сторінка для користувача та як її бачить Googlebot перейшовши по першому пункту «Подивитися як» у новому вікні «Отримати та відобразити»:

Обробивши ваш запит система видасть статус про готовність до перегляду або помилки:

Тиснемо на успішний статус і "вуаля": перед нами «два виміри»:

Перевіряємо схожість сторінок, робимо висновки. Крім того, під скрінами буде сформована таблиця до яких файлів Googlebot не зміг отримати доступ, можливо потрібно внести додаткові правки (якщо це локальні файли).

PS: Так як інструмент звітів є новим і не повністю обкатаний, складно сказати, наскільки дані рекомендації впливають на рейтинг ресурсу в цілому, проте враховуючи експеримент, опублікований на сайті yoast.com , змушує задуматися про важливість даних зауважень. Удачі в освоєнні нового інструменту від Google, не забуваємо передплатити наш блог. Якщо вам сподобалася стаття, ставте лайк і частіше заходьте на наш блог, де ви зможете дізнатися безліч корисних порад, які допоможуть покращити видимість сайту в пошуку. Ну а якщо вас зацікавило SEO в деталях, ласкаво просимо до нас на курси з просування . Усього доброго!