Robots.txt

G
На сайте с 21.08.2006
Offline
3
662

Случайно на своём сайте в файле robots.txt нашёл, что в нём только одна строка и всё это ключевые слова, это плохо?

AM
На сайте с 04.11.2003
Offline
57
#1

Ни плохо и ни хорошо... это - никак!

Что он есть с таким содержанием, что его вообще не будет. Роботам все-равно, если он не соответствует спецификации.

G
На сайте с 21.08.2006
Offline
3
#2

А если я в этом файле пропишу список всех страниц сайта, это поможет при индоксации?

[Удален]
#3

Gerttr, http://www.robotstxt.org/ лучше тут документацию посмотрите

-AlexK-
На сайте с 10.04.2006
Offline
21
#4
Gerttr:
Случайно на своём сайте в файле robots.txt нашёл, что в нём только одна строка и всё это ключевые слова, это плохо?

😂 А как это, "случайно нашел"? Не сами писали что ли?

А что у Вас в .htaccess прописано? Описание сайта? 😆

Удалите эту строчку и все, толку от нее - 0! robots.txt - не для описания в нем ключевиков.

"Останься... в живых"
K
На сайте с 31.01.2001
Offline
737
#5

Gerttr, вы поняли, что файл robots.txt для запрещения индексации части сайта? Вам это точно нужно?

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий