« SEO drive conference Киев-Одесса | Главная | Отчет о поездке в Одессу - Part 1 »
August 4, 2005
Slurp проверяет 404-ю ошибку
Полезно, все-таки, регулярно просматривать plain-логи веб-сервера — обнаружил запрос роботом Slurp некоей страницы /SlurpConfirm404/answer.htm, которой на сервере никогда не было и не планировалось создавать.
Предполагаю, что с помощью таких запросов робот Yahoo! тестирует сайт на правильность выдачи ошибки 404 Not Found, а не 301-редиректа на главную, например, как часто делается.
Я всегда при аудите сайта, в числе прочего, проверяю правильность выдачи 404-й ошибки, теперь и роботы...
Отправлено Cherny в August 4, 2005 2:02 PM
Комментарии
А зачем предполагать? Ответ на этот вопрос уже несколько лет доступен всем :)
Отправлено Saney в August 17, 2005 12:22 PM
Saney, cпасибо за ссылку.
Отправлено Cherny в August 17, 2005 12:45 PM
А в чем конечная разница - выдается на несуществующую страницу 404 или 200? Оно то конечно понятно, что 404 правильнее, но как поисковики на это реагируют?
Отправлено Chill в March 21, 2006 4:45 PM
Разница между кодами ответа 200 и 404 достаточно велика! ;)
Если кто-либо, включая поисковых роботов, получает ответы 404 -- это означает отсутствие страницы, как таковой, а значит в дальнейшем можно не тратить ресурсы на повторную индексацию и дальнейшую обработку документа. Если на сайте тысячи и десятки тысяч страниц, то выдача 404 для удаленных страниц освободит ресурсы роботов для обработки существующих страниц. Ну и т.д., включая давилки дубликатов и прочее...
Отправлено Cherny в March 22, 2006 11:32 AM
