Яндекс и форумы (vBulletin)

В булке куча всего, чего надо бы запретить в роботсе.

Disallow: /sendmessage.php

Disallow: /attachment.php

Disallow: /editpost.php

Disallow: /member.php

Disallow: /misc.php

Disallow: /moderator.php

Disallow: /newreply.php

Disallow: /newthread.php

Disallow: /online.php

Disallow: /profile.php

Disallow: /postings.php

Disallow: /private.php

Disallow: /printthread.php

Disallow: /report.php

Disallow: /search.php

Disallow: /threadrate.php

Disallow: /usercp.php

Disallow: /faq.php

Disallow: /register.php

Disallow: /go.php

Disallow: /cgi-bin/

Disallow: /archive/

Disallow: /calendar.php

Disallow: /memberlist.php

Disallow: /showthread.php?p=

Disallow: /showthread.php?goto=

Disallow: /showpost.php?p=

Это ещё не всё, скоро буду сочинять дальше на своём форуме, т.к. немного фигни ещё осталось.

Когда не было роботса, были такие же глюки как и у вас.

SiriuS, изучали? ;):)

Изучал, и что? Архивы там не запрещены, в индексе яндекса ссылок на обычные темы что-то не нашёл. У меня в роботсе кстати на много больше чего запрещено (разумеется темы не запрещены).

SiriuS добавил 11.01.2009 в 17:45

Архив "фигнёй" считать я не могу, много лет он служил верой и правдой..., да и в других поисковиках (гугл, рамблер) проблем с этим не заметил, а тут яндекс такой "сюрприз" устроил... собственно вопрос на этот счёт в первом сообщение, как лучше поставить, можно запретить индексацию, можно отключить архивы, а можно сделать переадресацию с архивных тем (я так сделал, на мой взгляд это лучший вариант) может ещё какие варианты есть? Может это вообще временно данное явление?

А у меня вообще форем не индексится, тоже на булке, ему уже пол года почти, а в индексе только главная, Контент конечно копирайтовский)))))))) Покупал пару десятков ссылок, но толку не дало.

К сожалению есть такая тенденция и у Гугла просматривается правда в менее фанатичных темпах чем у Ya, -забывать о старых страницах.

Это 2-3 года назад все жадно пожиралось, сейчас уже идет отбор , и в индекс попадает более важное с точки зрения поисковика, больше ссылок больше посещений. С одной стороны правильно, но с моей точки зрения для форумов не желательная тенденция,

иногда и очень важная информация может быть утеряна поисковиком

я всегда изучая новый для меня форум пользуюсь оператором site: для гугла (у яндекса не удобно имхо)

естественно выбрасывая страницы из индекса, поисковик ограничивает пользователя в возможностях, что не радует

есть подозрение, что раз на каталог /archive никто из пользователей внутри и вовне форума никогда не ставит ссылок,то и ловить в этом каталоге нечего.

та же история была. плюнул и разрешил обычные адреса showthread.php.

а ведь специально старались для поисковых машин: там и текст чистый и ссылки изменяются "только вперед". парадокс.