По поводу предыдущего ответа. Как известно, 404 ошибка возникает, если набран неправильный адрес или в процессе загрузки документа она была прервана. Это значит, что даже если нет сломаных ссылок на сайте, ошибка очень даже может возникать.
Видимо, в этом случае PR страницы набирается за счет вызовов страницы, а не за счет ссылок на нее.
Хочется сказать пару слов с защиту редиректов.
В свое время переходил я со статических страниц новостей на динамические. Поскольку у таких файлов расширения естественно разные (у одних .html, у других .php3), то и ссылки на новости пришлось перебивать на новые адреса. Потом пришлось перейти на следующую версию php, причем с сохранением возможности работы со старой. А чтобы разные парсеры хватали свои страницы, развели их по разным расширениям - .php для нового и .php3 для старого. Перспектива опять менять все ссылки на новости на сайте довела меня до мысли, что проще ссылки все заточить под один файл, а с него уже редирект на нужный. Заметьте, все это делалось исключительно во избежании ошибок (поскольку любое редактирование - источник ошибок). Теперь мне достаточно изменить в одном месте адрес редиректа, а не шерстить все страницы.
Буду рад оказаться полезым даме . У меня с яндексом была история похожего толка. Имелся русский (.ru) и нерусский сайт (.com). На них имелись перекрестные ссылки. После сабмита русского сайта через две недели на яндексе появилисся как тот, так и другой сайт, причем комовский сайт иногда позиционируется даже выше русского. (А вы говорите яндекс нерусский интернет не любит :cool
Поэтому, могу посоветовать следующее - зарегистровать русский домен - туда можно поместить доорвей (очень ненавязчивый, конечно), и его подсунуть на индексацию. Вероятность того, что поможет, весьма высока.
P.S. А вот .ch сайт яндекс проигноривал предметно, хотя отличий на нем нем не больше чем на .com от .ru.
-------------------------------------------
Есть мнение, что робот Яндекса очень любит домен narod.ru, поэтому зарегистровава там сайт и кинув туда доорвей, можно несколько ускорить процесс. Хотя, по моим наблюдением, цикл работы робота Яндекса составляет порядка 2-х недель. У Апорта это в районе 3-х недель, а вот пока Рамблеру не просабмитишь, он не переиндексирует. Они сами честно пишут в советах для вебмастеров, что при любом изменении сайта рекомендуется перерегистрировать сайт. Дескать, индексировать не будем, пока не попросите.
Можно сказать, что делать доорвеи - опасное, но благородное дело.
У меня с Яндексом была интересная история. До того, как я сделал доорвеи, сайт по нужному ряду запросов был в далеком низу (а по ненужному - вообще нигде). После того, как их сделал, сайт выскочил на первые позиции именно через доорвеи. Через неделю-две начали происходить чудеса - по каким-то запросам доорвей вылетал за пределы трех первых страниц, а те страницы, которые раньше были ниже некуда, поднялись в первые строки. Иногда происходило все наоборот - доорвей возвращался, а страницы падали. Но несмотря на эту кутерьму, в целом, так сказать интегрально, сайт по нужным запросом находится на достаточно высоких позициях.
Поэтому можно сказать, что доорвеи - локомотив для сайта. Они вытягивают не только себя наверх, но и другие страницы. И даже если доорвей мягко понизят, то другие страницы будут наверху. Так, по крайней мере, говорит мой опыт. Так что не бойтесь доорвеев.
P.S. Конечно, тут нельзя переборщить, а то и весь сайт могут забанить.
Насколько я могу понять, первый - это тестовая версия нового робота, которую, по-видимому решили обкатать в боевых условиях(обычная процедура для для любого софта - тестовый режим).
Второй же бот - текущая версия, для замены которой предназначен первый.
Вижу, что обсуждение начинает уходить вбок от конструктивного русла. Отвечу так - подняться в поисковиках хотят все сайты. А почему я развел такую бодягу - просто хотел не отрезать от сайта как можно больше народа. Как говориться - "пусть уж лучше не будет друзей, лишь бы не было врагов"
<font color="blue">А вот за это искреннее спасибо!</font>
Для реализации механизма Doorway. Когда агент получает страницу, можно определить его подпись, в зависимости от этого выполняется или невыполняется скрипт переадресации. То есть те агенты, которые подпадут под определние как браузеры (именно поэтому я и спросил, является ли слово "Mozilla" общим для всех браузеров), перенаправятся на сайт, а те, кто под определение не попадет, останутся на этой странице. Причем чтобы забанить этот сайт, робот должен очень тонко разбираться в JavaScript, поскольку перенаправление происходить при реализации определнных условий и не используется событие onLoad. В общем, это должен быть не робот, а монстр какой-то.
А основная цель - перепроска пользователей с обычным браузером с доорвея на основной сайт, поскольку иметь входную страницу с отсутствием дизайна не позволяет статус сайта...
В общем, ход рассуждений был примерно таким.
Весьма признателен!
