Намедни сделал FAQ по robots.txt
В связи с этим вопрос - нет ли тут каких-то нюансов и будет ли команда типа Allow: /word/ работать?
Будет для робота статические или динамические страницы пофиг. Но учите, что алоу это расширение синтаксисиса и часть роботов не будет ее понимать. Яша ее понимает.
Если две статьи нужно проверить воспользуйтесь Hkey Shingles Compare
Или мой Гайд в подписи.
А что то не связанное с морфологией?
Когда будет Новая версия?
В начале Лета.
Нужно не SEO, а SMO.
Попробуй те Сео генератор - он в подписи.
Да однозначно в роботс.тхт прописать. Host: И добавлять токо один а то намучаетесь с зеркалами.
Советую поставить музилу фаер фокс там в полях ввода есть что-то типа вордовского спел чека. И она подсвечиват ошибки. Удобно и русский понимает )
По теме на счет индексации нет, но из-за этого может потеряться часть поискового трафика.
Здесь около 500 имен разнообразных роботов.
