Проблема с robots.txt

TD

7

TopDeveloper

16 января 2015, 12:39

353

robots.txt нет а Я и Г видят его как

User-agent: *

Disallow: /

и соответственно содержимое сайта не индексируется.

Как так?

360

Психиатр

16 января 2015, 19:49

#1

Так сделайте роботс, в чем сложность? И вообще роботс может быть ни при чем.

861

alaev

16 января 2015, 22:39

#2

TopDeveloper:
robots.txt нет а Я и Г видят его как
User-agent: *
Disallow: /
и соответственно содержимое сайта не индексируется.
Как так?

А вот так!

Disallow: / - запрещает индексацию сайта полностью. См. тут.

Удалите эту строчку и все будет норм.

Проверить правильность работы robots.txt можно в панели вебмастера Яндекс.

Создание и продвижение сайтов - https://alaev.net , аудиты сайтов, контекстная реклама

360

Психиатр

17 января 2015, 08:20

#3

alaev:

Disallow: / - запрещает индексацию сайта полностью.
Удалите эту строчку и все будет норм.

:) Он бы рад удалить, только у него на сайте нет robots.txt.