« Версия SEOBar для FireFox | Главная | Апдейты Яндекса, рассылка и кеши »

May 11, 2005

У Рамблера барахлит удалялка

Уже около месяца на сайте лежит robots.txt, запрещающий индексацию сайта всем роботам. Яндекс сработал на удивление быстро — недели не прошло, а в базе уже ничего нет. А вот механизм Рамблера по удалению запрещающих страниц, о котором я уже писал, что-то барахлит: страницы из базы не удаляются, хорошо хоть новые не индексирует. На прошлой неделе написал письмо в службу поддержки — реакции никакой. То ли они все в Египте дайвингом занимаются, то ли робот сиротой остался.

Сейчас положил robots.txt, где добавил секцию специально для StackRambler, может он общие правила плохо воспринимает.

Отправлено Cherny в May 11, 2005 11:57 AM