Негативное влияние блокировки CSS и JavaScript файлов

27 октября в руководстве для веб-мастеров появилось обновление, касающееся скрытия CSS и JS файлов от робота с помощью robots.txt. Если говорить кратко — блокирование доступа Googlebot к CSS и JS файлам вредит индексированию контента и может привести к неоптимальному ранжированию сайта в поисковой системе Google.

Причина такого заявления ясна — заставить веб-мастеров отдавать роботу контент сайта так, как его видит человек. Если вы не заметили, то 27 мая в панели Google Webmaster появился новый инструмент под названием Fetch as Google.

Fetch as Google

https://www.google.com/webmasters/tools/googlebot-fetch

Он позволяет показать, как Google Bot видит страницы содержащие JavaScript и СSS. Малого того вы можете узнать, как выглядит Ваша страница для робота анализирующего мобильную версию сайта. Для этого, перед тем как нажать «Сканировать и отобразить», нужно дополнительно выбрать какой робот будет рендерить веб-страницу для отображения.

Fetch as Google mobile

Уже не секрет, что Googlebot помимо текстового и ссылочного анализа научился определять: скорость загрузки страницы, уникальность изображений, исполнять и отображать JavaScript, анализировать расположение блоков на странице.

Как обновление зацепит SEO-оптимизаторов:
Скрытие части контента в файле robots.txt c последующей подгрузкой его на страницу с помощью JS является своеобразным приемом реализации тега noindex (работает исключительно для поисковой системы Яндекс и обозначает части контента индексирование которых нужно запретить). Об этом я уже писал и знаю, что многие оптимизаторы с успехом используют этот прием для борьбы с дублированием текстовых блоков, которые нужно выводить на всех страницах сайта.

Исходя из новых рекомендаций Google для вебмастеров, возможно, скоро от этого придётся отказаться. Хотя я считаю, что вся шумиха, поднятая на счет этого вопроса на SEO-форумах ничего не стоит. Рекомендации — это еще не правила… ну а если будет замечена хоть какая-то пессимизация сайтов в поисковой выдаче связанная с этим нововведением, мне придется рассказать Вам о еще 2-ух способах скрытия контента от пс Google =), а пока запущу маленький эксперимент чтобы узнать, что работает и за что будут наказывать в недалёком будущем.