404 ошибка возникает, если в адресной строке набрать url-адрес несуществующей страницы. проблемы могут возникнуть, если кто-то разместил ссылку на статью, которую вы удалили. Например, когда поисковый робот перейдет по ссылки http://4ill.ru/trtgfgfg, то он точно будет знать, что данной страницы несуществует, т.к. получит от сервера вот такой ответ:
Как вы видите, страница отдает код 404, что означает, что обозначает отсутствие запрашиваемой страницы. В данном пример обработка 404 ошибки настроена корректно.
Однако существует случаи, когда робот, перейдя по несуществующему адресу, может получить код отличный от 404-го. Давайте рассмотрим типичные примеры и последствия, к которым они могут привести.
Первый случай, когда обработка 404 ошибки не осуществляется совсем. Не будем далеко ходить за примером, обратимся к замечательному сайту . Если набрать после адреса сайта любое количество произвольных символов, вроде этого , то к удивлению многих, мы окажемся на той же самой страницы. Вернее страница будет другая, а вот содержание одинаковое.
А теперь представьте, что вы проставили ссылок 300 с такими абстрактными адресами. По этим ссылкам приходит поисковый робот и обнаруживает, что на трехстах страницах сайта, находится один и тот же контент. Дальше я вижу два варианта развития событий, либо поисковая система исключает данный сайт из индекса полностью (т.к. считает, что это намеренный обман как пользователей, так и поискового робота), либо оставляет в индексе только одну копию страницы, но вот какую? К сожалению, наш любимый Яндекс очень часто ошибается в выборе первоисточника.
В качестве примера для второго случая, выбираем сайт многими любимого ЦОП Profit-Partner. Так же как к и в первом случае набираем какой-нибудь хитрый адрес и что мы видим?
Вроде написано, что страница не найдена и т.п., и на первый взгляд все это может сойти за страницу 404 ошибки, но…
Во-первых, в адресной строке неожиданным образом появилось http://profit-project.ru/pagenotfound/?/wwrefsgsgr/. Вся эта прекрасная неожиданность реализуется при помощи 302 редиректа, который Яндекс явно недолюбливает.
Во-вторых, страница http://profit-project.ru/pagenotfound/?/wwrefsgsgr/ отдает очень прекрасный заголовок:
Как видите поисковому роботу в таком случае отдается код 200 ОК, что означает прекрасное самочувствие страницы http://profit-project.ru/pagenotfound/?/wwrefsgsgr/, и такие страницы с удовольствием будут приняты в индекс поисковика. В конечном итоге, мы также можем получить огромное количество различных страниц с одинаковым содержанием.
Надеюсь, что все выше описанное совместно со статьей про внутренний дубли контента, убедило вас серьезней отнестись к настройки 404 ошибки.
На последок хочется добавить только одно, помните, что часто, настроив корректную обработку 404 ошибки в основном каталоге http://site.ru/fdfdfdfdf, многие забывают, что на некоторых CMS, во внутренних каталогах сайта http://site.ru/folder/fdfdfdfdf данную ошибку приходится настраивать отдельно.
Все, удачной оптимизаци…
Похожих записей нет.
Ты всё правильно пишешь, но замечу, что появление множества неправильных ссылок на сайт маловероятно.
P.S. http://4ill.ru/tratatataaa//optimizaciya-404-not-found/
Тормоз, я, если честно, и сам уверен, что без настройки 404 ошибки, сайт может прекрасно себя чувствовать в топе по конкурентным запросам. Однако, из-за кривизны CMS или рук верстальщика, порой в индекс Яндекса попадают страницы с адресами, которых быть не должно. После одного такого случая, я выделил для себя настройку 404 ошибки в ряды обязательных, тем более это занимает не так много времени
P.S. Ссылка улыбнула
, спасибо
[...] нескольких месяцев. Поэтому все основные проблемы: обработка 404 ошибки, сделано все для правильной индексации сайта, а также [...]