Изменение User-Agent робота Рекламной сети Яндекса
Posted on : 29-05-2010 | By : Design_Nick | In : Новости
Метки: агенты, роботы
0
В июне 2010 года изменится вид представления роботов Яндекса в User-Agent и их интерпретация в robots.txt.
С помощью этих изменений мы хотим:
* привести представления всех роботов к единому виду;
* сделать представления роботов более информативными.
Новый User-Agent робота, который индексирует страницы сайтов — участников Рекламной сети Яндекса:
Mozilla/5.0 (compatible; YandexDirect/3.0)
Обращаем внимание владельцев сайтов РСЯ: в связи с изменением интерпретации файла robots.txt, блокировка робота User-agent: Yandex в robots.txt может привести к блокировке всех роботов Яндекса, включая робота РСЯ.
Чтобы удостовериться, что робот Рекламной сети Яндекса будет обходить ваш сайт, необходимо добавить в начало файла robots.txt в корневой папке следующую запись:
User-Agent: YaDirectBot
Disallow:
