Яндекс не реагирует на robots.txt?

12 3
victim
На сайте с 12.02.2006
Offline
189
1899

У меня с самого рождения на сайте лежит robots.txt с директивой Host: www.site.ru

Но в выдаче показывается site.ru

Да кстати и сслочки на сайт в большинстве своем стоят с www

Это что может быть?

ЗЫ Произошла расклейка доменов с www и без везде!

Может это из-за глюков последнего времени?

CheckTrust.Ru (https://checktrust.ru/) - новый сервис для проверки ТРАСТа и заСПАМленности сайтов.
K. Ermakov
На сайте с 10.12.2004
Offline
328
#1
victim:
У меня с самого рождения на сайте лежит robots.txt с директивой Host: www.site.ru
Но в выдаче показывается site.ru

Дата рождения сайта какая?

С уважением, Константин Ермаков, absite.ru: онлайн кроссворды (http://absite.ru/); searchsuggest.ru: поисковые подсказки доставляют (http://searchsuggest.ru/).
K
На сайте с 31.01.2001
Offline
737
#2
victim:
на сайте лежит robots.txt с директивой Host:

это единственная директива в robots.txt ?

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
victim
На сайте с 12.02.2006
Offline
189
#3

K. Ermakov, Рождение - июль 2006. (ЗЫ Раньше было в выдаче с www о_О)

Kost, Вот содержание файла

User-agent: *

Host: www.site.ru

bright
На сайте с 12.10.2006
Offline
20
#4
victim:
K. Ermakov, Рождение - июль 2006. (ЗЫ Раньше было в выдаче с www о_О)
Kost, Вот содержание файла
User-agent: *

Host: www.site.ru

почитайте хелп по роботс по внимательней, и перепишите файл

victim
На сайте с 12.02.2006
Offline
189
#5

Почитал.

Я правильно понял что вместо того что сейчас

User-agent: *

Host: www.site.ru

надо сделать

User-agent: *

Disallow:

Host: www.site.ru

Правильно?

K
На сайте с 31.01.2001
Offline
737
#6

А еще надо убрать все пустые строки!

А User-Agent лучше написать: Yandex

т.к. остальные этот блок не поймут, не надо их смущать.

pan
На сайте с 24.10.2004
Offline
164
pan
#7

User-Agent: Yandex

Disallow:

Host: www.site.ru

User-agent: *

Disallow:

Мебельные фабрики Екатеринбурга (http://www.mebel66.ru/catalog/producers/) Дачный ГС жены (http://www.nafazendu.ru) Нет темы для бизнеса ? - да эта тема под ногами (http://www.uralstroyportal.ru/modules/forum/t1674.html)
victim
На сайте с 12.02.2006
Offline
189
#8

Всем спасибо.

А пустые строчки как то смущают поисковиков?

K
На сайте с 31.01.2001
Offline
737
#9

Почитайте стандарт, в блоке не должно быть пустых строк!

"The file consists of one or more records separated by one or more blank lines "

Данил
На сайте с 17.01.2006
Offline
153
#10
pan:
User-Agent: Yandex
Disallow:
Host: www.site.ru

User-agent: *
Disallow:

Зачем? Лучше так:

User-Agent: Yandex

Host: www.site.ru

🚬

Покупаю сайты (/ru/forum/394337). Заработай себе на екро — Сапа (http://www.sape.ru/r.0d0e35f6a7.php). Для продвжиения быстро и на автомате (http://www.seowizard.ru/r.0d0e35f6a7.php)!
12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий