Не думаю, если алгоритм запустили вечера-седня, вы посмотрели на дату темы?=)))
Я думаю все равно стоит ставить редирект =)))
Это понятно, вопрос в чем яша нормально будет реагировать?
Думаю интересно будет
я за 1-3,5,6,7
Ну если отчаянный, все 18 способов делали ?
/ru/forum/197239
Гугл ест все, это заграничный ресурс у нас мало его фильтров, вот яша еще та вредина=))))
Disallow: /
Вы закрыли весь сайт от Яши, ну блин Яндекс же на де дает почитать как правильно составлять, советую прежде чем что то делать с роботсом читать
http://help.yandex.ru/webmaster/
Очень интересно, но если страницы от 6000, 14000 тысяч, редиректы грузить сильно не будут?
И все же . как искать эти дубли?=)))Вопрос дня
Неа не думаю, мне тут один Оптимизатор доказывал, что при верстке оч много бывает вот таких вот багов
Цитирую
есть стандартная ссылка вида: /index.php?do=feedbackнекоторые чудо-верстальщики пишут ее в коде сайта так: /?do=feedbackили еще хуже: ?do=feedbackбез слешей и т.д.... таким образом, если данная страница сквозная, то она начинает создавать по 1 дублю на каждую страницу дубли такого плана: сайт.ру/556-чпу-статьи.html?do=feedbackвот тебе простая ситуация, что могут делать ошибки в коде. Сам проверь.. введи в конце любой новости приставку ?do=feedback.. неудивительно, что попадешь на эту же стр. еще простой пример.. есть модули старые.. либо школьниками написанные.. которые генерируют старые УРЛы, еще без ЧПУ.. они также доступны для бота! Еще получаем бует дублей страниц. и чтоб не морочить голову с редиректами, я закрываю некотрые вещи роботом, а уже зеркала настраиваю редиректом.
как то он все так сумбурно запутанно пояснял, нифига не понял =)
Ок, а насчет как их выявлять?=) что бы составить правильный робот, нужно знать что туда писать, а что бы знать нужно понять как выявлять эти страницы
