GoogleBot и YandexSomething
10 Январь 2009
Упорный rss-гуглобот приходит на мой блог каждые 3 часа, одновременно с FeedBurner’ом. Не зря они его купили, но неужели всё ограничивается банальным добавлением параметра ранжирования в поисковой выдаче «количество rss-подписчиков»? Как вы думаете?
И YandexSomething – «робот, индексирующий новостные потоки партнеров Яндекс-Новостей» тоже заходил каждые 3 часа и требовал файл robots.txt, и больше ничего. правда вскоре понял что я не партнер Yandex-новостей и приходить перестал.
Продолжаем наблюдение 
На блоге находят
