Яндекс начал индексировать JavaScripts и CSS-файлы. Так поисковик сможет оценить удобство интерфейса сайта, получить контент, который ранее был недоступен роботу, и сравнить эти данные с уже используемыми при ранжировании в поиске.
«Если эти данные позволят предоставить пользователям нашего поиска лучший ответ по какому-либо запросу, то в ранжировании мы будем использовать именно версию, полученную с использованием JavaScripts и CSS», - сообщается в официальном сообщении.
Т.е. сайты, уделяющие значительное внимание своему дизайну и интерфейсу, могут оцениваться Яндексом выше. Сейчас нововведение тестируется и применяется для небольшой части сайтов, но объем индексируемых таким образом ресурсов Яндекс обещает расширять. Поэтому уже сейчас поисковик рекомендует владельцам и разработчикам сайтов открыть файлы с JavaScripts и CSS в robots.txt.
Несомненно, это шаг вперед. Но следом за Google.
Еще в 2012 году руководитель группы Google Webspam Мэтт Каттс рекомендовал вебмастерам не запрещать поисковым роботам индексировать эти элементы. А осенью 2014 года Google обновил свои рекомендации для вебмастеров в этом ключе. Ведь индексация JavaScript, CSS помогает поисковику лучше понимать содержание страницы/сайта и дает возможность Google предоставлять более качественные результаты поиска.
А вот закрытие этих файлов может привести к неверному распознаванию страниц и повлиять на ранжирование.