Правильный ли robots.txt

S
На сайте с 14.09.2007
Offline
28
599

Здравствуйте!

Хочется, чтобы Яндекс проклеил сайты videosaver.ru и videosaver.ucoz.ru и основным считал videosaver.ru

Сделал robots.txt - http://videosaver.ucoz.ru/robots.txt ( примерно, месяц назад )

Но ощущение такое, что Яндекс и думать не думает склеивать сайты. Может я неправильно составил файл роботс ?

Спасибо!

mhz
На сайте с 16.05.2007
Offline
190
mhz
#1

должен склеить со временем.

единственное, что я бы первую инструкцию опустил бы в конец — первая должна быть для всех роботов.

почитайте http://robotstxt.org.ru/

Миниатюрный бультерьер Сахарок (http://www.bule4ka.ru/) — СДЛ о собачках. Вечные ссылки — безопасный способ продвижения и заработка. (http://miralinks.ru/users/registration/from:163)
rmikel
На сайте с 25.05.2007
Offline
142
#2
videosaver.ucoz.ru

Какие показатели у это сайта и какие у нынешнего ?

- Здесь (http://www.sape.ru/r.fa62530507.php) становятся богатыми буратинами... и здесь (http://www.mainlink.ru/?partnerid=11422) тоже. ;) - "В жизни нет ничего такого, ради чего стоило бы спешить" (c)то-то сказал.
kimberlit
На сайте с 13.03.2007
Offline
370
#3
mhz:
единственное, что я бы первую инструкцию опустил бы в конец — первая должна быть для всех роботов.

Лучше когда инструкция для всех роботов стоит в конце, а для индивидуальных в начале.

S
На сайте с 14.09.2007
Offline
28
#4

rmikel, а про какие показатели Вы спрашиваете ?

По статистике "Мои сайты" Загружено страниц: videosaver.ucoz.ru - 644, videosaver.ru - 22 :)

Почитав robotstxt.org.ru, спасибо mhz, и судя по ответу А. Садовского на вопрос 43, остается только ждать.

Меня смутило вот что. Через /robots.txt глазами Яндекса для поддомена ucoz говорят ровно следующее:

Индексация сервера videosaver.ucoz.ru:80 запрещена полностью.
Главное зеркало, указанное в директиве 'Host:' - videosaver.ru

Т.е. Яндекс понимает robots.txt правильно. Но индексация ucoz продолжается. Мне казалось, что фраза "Индексация запрещена полностью" говорит о том, что в индексе, как минимум, вообще не должны появляться новые страницы с поддомена ucoz.ru.

На всякий случай, перенес инструкцию для всех роботов в конец.

[Удален]
#5

Нужно ждать.

S
На сайте с 14.09.2007
Offline
28
#6

А как точно определить, что домены проклеились? Есть подозрение, что склеивание произошло, поскольку, в "Моих сайтах" в яндексе у одного домена (ucoz) стало загружено страниц - 0.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий