Яндекс рассказал как управлять роботом

Яндекс 13 мая опубликовал в Яндекс.Помощи список факторов, с помощью которых веб-мастер сможет оптимизировать работу своего сайта с роботом поисковой системы Яндекс.

Согласно специалистам Яндекса, в список данных факторов входят мета-тэги: Keywords (может учитываться при определении соответствия страницы поисковым запросам, Description (его содержание может использоваться в сниппетах), Content-Type (учитывается при определении типа документа и его кодировки),  refresh.

Кроме того, робот Яндекса учитывает указания в тэгах meta name=''robots'' и noindex.

Атрибут rel="nofollow" работает аналогично мета-тегу со значением nofollow, однако  распространяется только на ссылку, для которой указан.