О robots.txt

12
djdiplomat
На сайте с 05.08.2009
Offline
136
618

Скажите, если файл robots.txt на сайте отсутствует поисковики при индексации его создадут, или надо хотя бы пустой в корень закинуть?

Заранее всем спасибо.

РожденныйОсенью
На сайте с 05.01.2006
Offline
77
#1

Откуда у них доступ на ваш сайт?

Проблемы зоны РФ (http://www.yaoptimizator.ru/2008/09/06/kirillicheskie-domeny/) Как заставить пользователей подписываться на RSS? (http://www.yaoptimizator.ru/2008/10/22/istoriya-sozdaniya-rss-kartinki/)
kimberlit
На сайте с 13.03.2007
Offline
370
#2
djdiplomat:
поисковики при индексации его создадут

Ага. А потом они контентом сайт наполнят и дизайн подправят ... У них столько дел на вашем сайте, жуть ...

Talisman13
На сайте с 20.01.2007
Offline
211
#3
kimberlit:
А потом они контентом сайт наполнят и дизайн подправят ... У них столько дел на вашем сайте, жуть ...

Ты про продвижение еще забыл. :D

[Удален]
#4

:-)

никто ничего не создаст.

если нет его, ничего особо страшного нет. А если есть, для поисковиков там указывается, как бы выразиться... помощь к действиям (что с кем склеить, что нужно закрыть от индексации, и так далее)

kimberlit
На сайте с 13.03.2007
Offline
370
#5
Talisman13:
Ты про продвижение еще забыл.

Точно. Забыл. Посыпаю голову пеплом.

djdiplomat
На сайте с 05.08.2009
Offline
136
#6
РожденныйОсенью:
Откуда у них доступ на ваш сайт?

Через стандартные формы добавления сайта в поисковики (Яндекс http://webmaster.yandex.ru/ , Google и т.п , ).

Talisman13
На сайте с 20.01.2007
Offline
211
#7
djdiplomat:
Через стандартные формы добавления сайта в поисковики (Яндекс http://webmaster.yandex.ru/ , Google и т.п , ).

Но в этих же службах от вас не требуют пароля это раз. И там таких действий совершенно нет, как сделать robots.txt

djdiplomat
На сайте с 05.08.2009
Offline
136
#8
Talisman13:
И там таких действий совершенно нет, как сделать robots.txt

Посоветуйте, плиз, где можно более полно и в доступной форме "вычитать😂" как создать такой файл. Я вот на этом сайте смотрел http://www.nikolaich.ru/pages.php?page=26, но хотелось бы поподробнее узнать.

[Удален]
#9

создать его просто. как обычный файл, просто имя ему указать robots.txt

в общем http://robotstxt.org.ru/ вот, читайте, там все написано.

все опции, что для чего и так далее.

Talisman13
На сайте с 20.01.2007
Offline
211
#10

еще можно здесь почитать http://help.yandex.ru/webmaster/?id=996567

И поисковик в помощь.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий