Либо делать редирект чем-то, что умеет записывать в журнал редирекченые урлы, либо rel="canonical" и оставить всё как есть.
Текущая конфигурация плоха, Willie в целом правильно сказал. Редирект 301 был бы хорошим решением, но на практике при этом будет непросто решать задачу 2 (подумайте, а в самом ли деле вам это нужно).
В качестве паллиатива можно попробовать прописать на всех страничках тэг с их каноническим урлом — если гугл сделает всё, как надо, эффект будет не хуже, чем от редиректа. Хуже, чем есть сейчас, от этого уж точно не станет.
Увидел только про русскоязычность сайта и украинскость хостинга. Согласитесь, это не одно и то же :)
[удалено, пульнул не в ту ветку]
Вот как раз в этом случае оно обычно ни фига и не удаляется месяцами (если мы об автоматическом удалении). Перекрывать в robots.txt подлежащие самоудалению ресурсы нельзя. Та же история с noindex — глупо, прописав его, ещё и "на всякий случай" закрывать страницу в robots.txt.
snk,
аудитория сайта местная? Если иностранцы, то тестировать нужно из-за границы, может получиться в разы медленнее, особенно если страница состоит из большого кол-ва объектов. В первом приближении можете попробовать site-perf.com (обратите внимание на разницу во времени доступа из Европы и Штатов), но он не исполняет скрипты.
Ippi добавил 23.03.2010 в 16:53
WebPagetest скрипты исполняет, но чуть посложнее в использовании.
Мне показалось, что вообще, т.е. хорошо индексируются и ищутся только действительно популярные форумы, обросшие естественными ссылками, а также маленькие форумы, которым хватило авторитета родительского сайта или начального раскруточного бюджета.
В общем, помимо всевозможных оптимизаций, для хорошей индексации нужна и грубая сила — заливка страниц форума PageRank'ом. Каттс на прошлой неделе уже открытым текстом сказал, что кол-во индексируемых на сайте страниц примерно пропорционально пейджранку этого сайта (не путать с пейджранком корневой страницы). Так что форум, не форум, а ссылки всё равно нужны — чем больше, тем лучше.
Не уверен, что правильно понял задачу, но должен помочь или 301 редирект, или rel="canonical".
Ну а почему бы гуглу и яндексу не относиться к форумам по-разному? Не братья всё-таки.
Если не боитесь экспериментировать, можно ещё с vBSEO повозиться...
Ну, с яшей не знаком, а по гугловым меркам та ссылочная масса, что у вас есть — однообразна и некачественна. А ссылки со страниц каталогов с сексшопами и женскими форумами для форума по сетевому оборудованию вообще пойдут скорее во вред.
С украинским доменом это сделать чуть труднее, но ненамного. Опять же, накидаете чуть побольше ссылок, желательно с российских сайтов тоже :)