Я хотел сказать о том, что использование текстовых файлов в сочетании с include временами работает быстрее чем запросы к базе данных.
Scaramush, отвлеклись от темы, так что предлагаю прекратить. :)
Категорически с Вами не согласен. Все сильно зависит от конкретной реализации. Если использовать flat files для хранения данных, то база данных может работать быстрее, но далеко не всегда.
Это камень в мой огород, в статье действительно ошибка.
Gray, можно каким-нибудь образом подправить текст статьи?
Почитайте эту тему, и еще вот эту, это может несколько прояснить вопрос.
Если на файлы в этих директориях есть ссылки, то хакер их и так найдет. Зачем только такие ссылки ставить?
А если ссылок нет, то и указывать их в robots.txt совершенно незачем.
Сервер надо настраивать правильно + скрипты писать аккуратно.
Если закрывать ничего не надо, то можно сделать следующее:
1. Не создавать robots.txt;
2. создать пустой;
3. создать по всем правилам и разрешить индексировать все.
в первых двух случаях робот волен поступать на свое усмотрение, в третьем я ему даю определенные инструкции, что несколько греет душу :).
Важно, что результат будет одинаковый.
http://www.robotstxt.org/wc/norobots.html
Роботы ищут?!
AFAIK, иконка -- прерогатива браузера.
Я придерживаюсь противоположного мнения.
Если закрывать ничего не надо, положите пустой файл или
User-agent: *
Disallow:
что есть одно и то же.
Вы не правы. www.site.ru -- это домен третьего уровня и поддомен site.ru, как справделиво заметил LiM.
www используется, в силу исторических причин, как обозначение сайта, доступного через http... Ну и так далее ;)
Присоединяюсь к поздравлениям!
Всего наилучшего, хорошего расположения духа, здоровья и удачи.
Больше полугода жду. Сайт информационный, ничего не продает, статей более 500. Писал письмо, ответ стандартный.