Как грамотно выкинуть страницы из индекса?

12
Web-Silver
На сайте с 02.05.2007
Offline
247
1096

Добрый день!

Такая ситуация: в старом дизайне сайта стоял форум VBulletin старой версии (по-моему аж 2.2.9), в декабре 2007 года был полный редизайн сайта, в результате которого была поставлена последняя версия лицензионная VBulletin 3.6.8. С гуглом все в порядке, а вот в индексе Яши осталась такая чушь, при чем в огромных количествах:

/forum/forumdisplay.php?forumid=28&daysprune=1000&sortorder=asc&sortfield=lastpost&perpage=25&pagenumber=3
/forum/forumdisplay.php?forumid=15&daysprune=1000&pagenumber=2&perpage=25&sortorder=desc&sortfield=post
/forum/forumdisplay.php?forumid=28

При заходе по таким "левым" ссылкам старой воблы выдается следующее:

Раздел не указан или не существует. Если вы уверены, что использовали правильную ссылку, свяжитесь с администрацией.

По сути, в индексе должно остаться только 40 таких ссылок:

http://www.site.ru/forum/forumdisplay.php?f=N (N=1...40)

На ум приходит только следующее в robots.txt:

User-agent: Yandex
Disallow: /forum/forumdisplay.php

Вопрос: как грамотно выкинуть все это из индекса Яндекса, а потом просто убрать это указание для робота Яши? За сколько апов примерно эта дрянь вылетит?

Заранее благодарен за ответы!

dmitcat
На сайте с 26.05.2005
Offline
123
#1

у меня сайт "вылетел" за неделю, т.е за 1 ап... надо было полностью переиндексить сайта с *.php?blabla&blabla на *.html

поставил запрет в роботсе - через ап смотрю - кроме главной в индексе ничего нет. жду полной индексации теперь

Либо селяВи (http://www.puper.ru), либо селяВас (http://www.puper.ru)!!!
Web-Silver
На сайте с 02.05.2007
Offline
247
#2

dmitcat, интересно, а как получилось, что вылетел весь сайт? Скорее всего он удалил из индекса все странички "*.php"?

upyrj
На сайте с 17.09.2005
Offline
140
#3

Надо с панелью вебмастера поэкспериментировать (раздел «Анализ robots.txt»).

Если не ошибаюсь, что-то вроде такого должно правильно сработать:

User-agent: Yandex

Disallow: /forum/forumdisplay.php?*forumid*

Ну или дополнительно почитать это: http://help.yandex.ru/webmaster/?id=996567

Хотя лучше бы 301-ый редирект на правильные URLы, imho. Если возможно, конечно.

Денис Иванов Важно: обменом валют я не занимаюсь.
ST
На сайте с 22.02.2008
Offline
1
#4

У меня пару недель Яндекс старые линки держал. А потом все стало наромально.

Blog about Prison Break and more serials : FREE DOWNLOAD VIDEO (http://freedownloadvideocenter.blogspot.com/)
Web-Silver
На сайте с 02.05.2007
Offline
247
#5

upyrj, Денис спасибо! Попробую, либо подожду еще пару апов. ;)

dmitcat
На сайте с 26.05.2005
Offline
123
#6
Web-Silver:
dmitcat, интересно, а как получилось, что вылетел весь сайт? Скорее всего он удалил из индекса все странички "*.php"?

в принципе - мне и надо было все php выкинуть из индекса.

я написал в саппорт яндекса с вопросом, как мне переиндексить и привел в пример свою строку из роботса (Disallow: /*phpsessid)...

мне ответили что мол "верной дорогой идете товарищи" - я ее и оставил. сейчас сайт пошел на переиндексацию - страницы нового формата (*.html) нормально щас индексируются. а старые с сессиями в адресе - их естессно нет...

DkWix
На сайте с 04.11.2007
Offline
75
#7

Можно попробовать поудалять страницы с помощью вебмастера

Web-Silver
На сайте с 02.05.2007
Offline
247
#8

DkWix, можно попробовать, либо ждать когда Яша сам их выкинет. Но он что-то не торопится... :(

[Удален]
#9

Да в принципе пусть будут, они Вам мешают? Тем более это форум. Для Вас по идее сильного дискомфорта это не может причинить. Так что оставьте все как есть, как выкинет из индекса, так выкинет. ИМХО.

S
На сайте с 06.02.2006
Offline
85
#10

Web-Silver, чет помоему вы такими действиями не только удалите старые страницы, но и страницы с нового форума.

С уважением, Хорев Андрей (http://www.khorev.net/)
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий