Прислал. Серёга публикует....
Опубликовал:
С одной стороны, / - корень сайта. Выше его не может быть ничего.
Кстати, правилом хорошего тона считается указание URL с завершающим /. Если его не указать, то либо сервер, либо клиент должны по идее его добавить за пользователя. Мне же было лениво это эмулировать :) Другими словами, любую URL можно разбить на две части: domainName и pathName. PathName _всегда начинается_ с "/".
А с другой стороны, я не уверен, что _каждый_ робот будет считать синонимами блабла.ру и блабла.ру/.
между "пытаться запрещать" и "запрещать" может быть очень большая разница :). Проверяйте любой _документ_ домена, никаких проблем не будет.
В Бате - не знаю. Никогда им не пользовался.
Видимо также как и в Оутглюке - в свойствах соединения.
Маленькая тонкость: если набрать http://yandex.ru, то он вернёт allowed.
Если же http://yandex.ru/ - то вернёт disallowed. Объяснить почему? :)
Да простит меня модератор за саморекламу, но можешь почекать свой robots.txt тут
По тому, на который она получает запросы от клиентов. Например 8080 или любому другому.
Не совсем. К вечеру на форуме будет опубликована статья как раз про спам Рамблера :)
Типа того. Запаса хорошо проделанной работы хватает минимум на полгода, если основные запросы не сверхконкурентны. Кроме того, в exUSSR очень распространено: как ребёнок в 5 лет познает радость слова САМ, так почти до глубокой старости не желает перекладывать работу на плечи профессионалов. Поэтому, у нас увольняют администраторов сетей - если администратор работает профессионально, то со стороны выглядит, что всё само-собой работает. Я вот уже второй месяц пытаюсь разрулить ситуацию, когда программист в одно лицо (САМ!) "автоматизировал" одно не очень маленькое предприятие. И Игорь Ашманов на конференции упоминал о клиенте, который насмотревшись на красивые отчёты решил, что дальше будет оптимизировать САМ. И таких клиентов - очень и очень много. Кроме того, предложенная вами схема подразумевает, что клиент очень сильно зависит от оптимизатора. Скорее всего в таком случае не "клиент тупой", а оптимизатор не совсем добросовестный - понаставил ссылок на своих ресурсах и грозит их убрать, как только денежный поток прекратится...
СЗОТ=Сорри За ОффТопик
Я бы их назвал статистическими. Поскольку со временем они всё же меняются (тот же ВИЦ в среднем раз в неделю), то статическими их называть язык не поворачивается :)
СЗОТ: но с каких пор PR и ВИЦ стали статическими?