Должен? Откуда инфа?
ТС, почитайте это:
/ru/forum/298120
Может и не факт, но всё же шансов больше, чем когда даже робот не заходит =)
А если по делу - от частоты обновления контента зависит, если сайт часто и много обновляется и добавляет новые документы, то и робот будет чаще заходить...
Примерно в 1000 и 100 раз соответственно? =)
Поверьте, Яндексу глубоко плевать, какие скрипты выполняются у вас на сервере, ему немного интереснее, что за контент они выдают и куда более интересно, кто и как ссылается на этот контент... Так что, по большому то счету, для СЕО всё равно какая ЦМС, важнее как она настроена и что отдаёт роботу...
Для оптимизации лучшая ЦМС - это статика html + доступ на фтп (чего хочешь и где хочешь менять можно, только долго =)) или ЦМС написанная под конкретный проект с конкретным необходимым функционалом. А всё остальное, в принципе, фуфло. Хотя WordPress при наличии прямых рук очень не плох, может в общем-то много.
Если интересуют санкции - санкций за это не будет.
Если ссылочное, то это просто сквозняк.
Я просто пару-тройку недель назад закрыл домен и 4 поддомена в роботс (всего около 40 тыс. страниц), так через 4 дня их в индексе уже не было (хотя тут как повезёт - раз на раз не приходится конечно, можно и прождать). Кстати, тут есть один момент - весь внутряк из индекса ушёл, но морды до сих пор присутствуют в выдаче по ряду запросов, правда без тайтлов и сниппетов (если попробовать посмотреть страницу в кэше - она пустая). Но вот всё, что было "найден по ссылке" - всё осталось в выдаче...
Ну не так уж и медленно - один заход робота и в следующий ап (или через один, тут как повезёт) сайта уже нет.
В общем-то в свете последних изменений и при беглом просмотре сегодняшней выдачи напрашивается вывод о том, что теперь основной силой будет виц/вес/траст - называйте как хотите, хотя я имею ввиду скорее вес страниц (ВИЦ), а не траст (который не известно есть ли у Яндекса вообще)... О внутренних факторах практически можно забыть (кроме перелинковки), нет, ну не совсем забыть, всё же наличие ключевика на странице нужно, но не более того. Роль ссылочного немного изменилась именно в сторону передачи ВИЦ. И на первый взгляд как-то поменялось определение кворума, по длинным запросам кворум стало набрать легче...
Конечно, делать выводы ещё очень рано, надо подождать месяцок, пока всё уляжется, но по-моему основной принцип уже можно наблюдать...
В общем работать становится интереснее и веселее =)
