Опять про robots.txt

1 23
vredina
На сайте с 16.01.2006
Offline
29
#21
Стрела:
Я подумала и решила, что для моего сайта роботс не нужен вовсе. Мне ни к чему управлять индексацией ( а "управление" поразумевает закрытие или открытие чего-то для роботов, ИМХО), сайт небольшой. Пусть все индексируется.
Сайт, кстати, индексируется с момента создания нормально, а последняя индексация была 7 часов назад. Так что причин для волнений не вижу.

странное мнение...

возможно я ошибаюсь, но роботс не ограничивается только этим, он может помочь, например, если кто-то решить создать пару зеркал вашего сайта....

РожденныйОсенью
На сайте с 05.01.2006
Offline
77
#22
vredina:
странное мнение...

возможно я ошибаюсь, но роботс не ограничивается только этим, он может помочь, например, если кто-то решить создать пару зеркал вашего сайта....

В этом он конечно не поможет. Но вот определить основное зеркало для Я с помощью него возможно.

Проблемы зоны РФ (http://www.yaoptimizator.ru/2008/09/06/kirillicheskie-domeny/) Как заставить пользователей подписываться на RSS? (http://www.yaoptimizator.ru/2008/10/22/istoriya-sozdaniya-rss-kartinki/)
1 23

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий