Как убрать большое кол-во несуществующих страниц 404?

A2
На сайте с 29.12.2010
Offline
77
18488

Всем прифф. У меня вот такой вот вопрос.

В индексации Яндекса находятся страницы, которые давно не существуют. В Вебмастере пишется, что для того, чтобы их удалить ничего делать не надо они сами удаляться из индексации.

Прошло 3 месяца. Яндекс лишь добавил ещё. Всего - 782.

Написал в яндекс, ответили оперативно. Но озадачили.

Цитата:

Запретите несуществующие страницы для индексирования в robots.txt. Можете еще настроить сервер так, чтобы при запросе таких страниц нашему роботу отдавался код 404 ошибки. Затем добавьте страницы на удаление:http://webmaster.yandex.ru/delurl.xml. После обновлений базы информация по Вашему сайту обновится в Вебмастере, не волнуйтесь!

Или Вы можете настроить 301 редирект со старых страниц на соответствующие им новые страницы. Таким образом адреса страниц сайта обновятся в поисковой базе.

Не охота их больше доставать глупыми вопросами, подскажите как выполнить то, что они предлагают? А именно:

1. Запретите несуществующие страницы для индексирования в robots.txt.

Поискал в инете ответа пока не нашел. Какой командой это сделать?

2. Или настроить сервер так, чтобы при запросе таких страниц нашему роботу отдавался код 404 ошибки.

Как можно настроить так сервер? Есть гденить литература по этой теме?

3. Затем добавьте страницы на удаление:http://webmaster.yandex.ru/delurl.xml.

Тоесть необходимо настроить сервер и потом их все добавлять в delurl?? 782 страницы, я затра... замучаюсь добавлять их все. Может както можно упросить это?

4. Или Вы можете настроить 301 редирект со старых страниц на соответствующие им новые страницы.

Тоже не выход перенаправлять 782 страницы большинство из которых отображают не пойми что. То есть попросту некуда перенаправлять.

Чем можете помочь, господа seo-шники?

Заранее благодарен.

Aquasonick-2 добавил 29.01.2011 в 00:34

Движок: Joomla 1.5

Сайт: вот такой

С google вроде все нормально.

Aquasonick-2 добавил 29.01.2011 в 00:52

Кстати вот ещё момент. Пробовал добавить в deurl на пробу пару ссылку из тех, что находятся в вебмастере как ссылки ресурс не найден 404 и получил сообщение что Страница не проидексирована.

Может ли такое быть что он удалил уже их все с индексации? А в самом вебмастере продолжает считать рабочими и показывает страницу как с ошибкой?

Если это так, то может ли это влиять на выдачу?

И как очистить тогда вебмастер от этих ссылок. А то график с красными и желтыми линиями напрягает.)

Aquasonick-2 добавил 29.01.2011 в 14:32

И тишина... )

Yetti3
На сайте с 19.10.2010
Offline
105
#1

Мне кажется лучше перенаправлять 404 ошибки на главную

#/перенаправление с 404 на главную

ErrorDocument 404 http://svadba-tambov.ru/

----

http://www.instructing.ru/hitrosti/jast-htaccess.html

A
На сайте с 29.01.2011
Offline
2
#2

ничего делать не нужно, со временем сами отвалятся

farlow
На сайте с 07.05.2008
Offline
102
#3
Yetti3:
Мне кажется лучше перенаправлять 404 ошибки на главную
#/перенаправление с 404 на главную
ErrorDocument 404 http://svadba-tambov.ru/

----
http://www.instructing.ru/hitrosti/jast-htaccess.html

очень полезный совет 😂

Ищу дизайнера, вебмастера
Krakowiza
На сайте с 08.05.2009
Offline
45
#4

Для Joomla есть SEO модули для формирования 404 ошибок, и кстати 301 тоже есть. Поищите на официальном сайте расширений. Если хотите вручную через robotsс делать, то используйте команду disallow

Не подписываюсь.
[Удален]
#5

Важно понять, откуда появляются кривые ссылки, ведущие на несуществующие страницы. Устраните причину, и больше ничего не надо. Не будет ссылок - и страницы пропадут из вебмастера.

75
На сайте с 29.01.2011
Offline
39
#6

Тоже подобная ситуация. Были рсс для всех страниц, я их отключил, по таким урлам сделал ответ 404. Прошел месяц, яндекс постоянно на них ломится судя по логам. В роботсе запретил, прошел еще месяц, все так же ломится, в вебмастере все так же есть.

K
На сайте с 31.01.2001
Offline
737
#7
7tvn54w0:
В роботсе запретил, прошел еще месяц, все так же ломится

Ломится - это по логам?

В вебмастере - это не "ломится", а адреса, известные роботу.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
A2
На сайте с 29.12.2010
Offline
77
#8

Огромное все спасибо!!

Пошел разбираться. ) Если что, вернусь.)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий