В блоге для вебмастеров администрация оповестила пользователей, что робот «Яндекса» начал использовать CSS и JavaScripts при обходе некоторых ресурсов для получения полной информации и просмотра содержимого сайтов в современных браузерах.
Для оценки удобства интерфейса, полного доступа к контенту и сравнения с данными, использующимися при ранжировании в поиске, «Яндекс» начал использовать CSS и JavaScripts. Нововведение поможет роботу обходить некоторые ресурсы для получения полной информации и просмотра содержимого сайтов так, как она отображается в современных браузерах. Если информация, полученная с помощью CSS и JavaScripts, предоставит пользователям Поиска «Яндекса» лучший ответ по запросу, то ранжироваться будет именно эта версия.
Сегодня таким образом индексируется часть сайтов и страницы известные индексирующему роботу, но со временем технология распространится на все ресурсы. Поэтому администрация «Яндекса» рекомендует владельцам сайтов и разработчикам открыть в robots.txt закрытые файлы с CSS и JavaScripts и позаботиться о том, чтобы при работе робота с данными не возникло проблем с нагрузкой на сервер.
«Индексирование CSS и JS — давно ожидаемый шаг – считает руководитель отдела по электронной коммерции L’Occitane Мищенко Евгений, — Во-первых, это позволит улучшить поиск: робот начнет видеть больше данных, понимать их так, как реально видит посетитель сайта и, в зависимости от этого, ранжировать сайты. Во-вторых, это позволит пессимизировать в выдаче сайты, использующие «черные» методы продвижения. Конечно белое на белом уже никто не использует, но различные лазейки с CSS и JS еще применяются».
Процесс находится в режиме тестирования и потому не используется для всех сайтов. По завершению тестирования таким образом будут индексироваться все известные «Яндексу» ресурсы.
