Опять вылетел из Яндекса!!! Бан или глюк?

хм...у меня с самого начала существования одного сайта, стоит директава Host в фаиле robots. И всё норм.)

НИчего из рядо вон выходящего не вижу в вашем фаиле.

Не баловались рассылкой под доскам, каталогам чёрным?

100% утверждаю что ничего подобного не делал. Самое страшное и единственное что я делал это, покупка ссылок с сапы. Ито не много и делал проверку на проиндексированность в Яндесе каждой страницы где спокупал ссылку.

И вот ещё что заметил в панеле вебмастера. Ра ньше у меня показывалось число загруженных страниц в яндексе и число страниц представленных в поиске. А теперь в загруженных страницах только 1 ито не главная. А в индексе ноль.

Может просто сайт тупо вывалился из индекса во время последнего АП. И ещё это было где-то под утро, сегоднешнего дня. Сначала траф шёл с яндекса, где-то до 6 утра.

При бане число загруженных страниц не меняется (в смысле не уменьшается). Значит, скорее всего намудрили с запретами. Не зная структуру сайта, сложно сказать где. Напишите Платону, он достаточно быстро отвечает.

P.S. Закрывающие слэши, в принципе, лишние. Директиву Host не надо отдельно выносить, напишите ее после всех disallow. Либо в отдельном user-agent для Яндекса, опять-таки после disallow.

А по большому счёту нет не какой структуры, все основные страницы лежат в корневеке. Корневик я не закрывал. Да и вроде уже было несколько АПов и всё было нормально.

Написал Платону. подожду от него ответа. Лиж бы не пришлось ждать ответа неделями.

Мне кажеться, правильнее написать так:

User-agent: Yandex

Disallow:

Host: smstut.ru

User-Agent: *

Disallow: /shop/

Disallow: /kupitut.php?my=1&

Disallow: /baner/

Disallow: /geometry/

Disallow: /hmsms/

Disallow: /image/

Disallow: /jpisms/

Disallow: /lib/

Disallow: /libs/

Disallow: /narodsms/

Disallow: /sky/

Disallow: /skyform/

Disallow: /sms/

Disallow: /sms_chat/

Disallow: /smsbox/

Disallow: /smsmusic/

Disallow: /test/

Disallow: /tmp/

Я подобный роботс пишу на всех своих сайтах и все ОК

ЗЫ: после Disallow: ставьте пробел

Фига себе, ничего из ряда вон выходящего. Ну-ну...

spanchbob, Вас кто учил так составлять файл robots.txt? Допускается только одно правило вида User-agent: *. Ваш robots.txt составлен с ошибкой, ничего удивительного, что Яндекс отказывается следовать рекомендациям в нём и индексировать Ваш ресурс.

Угу, только роботу Яндекса он ничего не запрещает.

spanchbob, пропишите правильный robots.txt и советую ознакомится с правилами использования robots.txt
во избежании недоразумений в следующий раз. ;)

User-Agent: Yandex

Disallow: /shop/

Disallow: /kupitut.php?my=1&

Disallow: /baner/

Disallow: /geometry/

Disallow: /hmsms/

Disallow: /image/

Disallow: /jpisms/

Disallow: /lib/

Disallow: /libs/

Disallow: /narodsms/

Disallow: /sky/

Disallow: /skyform/

Disallow: /sms/

Disallow: /sms_chat/

Disallow: /smsbox/

Disallow: /smsmusic/

Disallow: /test/

Disallow: /tmp/

Host: smstut.ru



User-Agent: *

Disallow: /shop/

Disallow: /kupitut.php?my=1&

Disallow: /baner/

Disallow: /geometry/

Disallow: /hmsms/

Disallow: /image/

Disallow: /jpisms/

Disallow: /lib/

Disallow: /libs/

Disallow: /narodsms/

Disallow: /sky/

Disallow: /skyform/

Disallow: /sms/

Disallow: /sms_chat/

Disallow: /smsbox/

Disallow: /smsmusic/

Disallow: /test/

Disallow: /tmp/

Ziby, вообще-то User-Agent: * дает установку всем роботам, а если нужно что-то одному показывать а другому нет, тогда и пишется

User-Agent: Yandex

Disallow: /sms_chat/

....

Не ограничивайте себя только яндексом

Kirik, он даёт установку всем роботам тогда, когда нет инструкции для роботов конкретных ПС.

Повторюсь, в приведённом Вами примере выше для робота Яндекса ничего не запрещается.

Позволю себе не согласится с Вами, так как по логике, в Вашем примере яндекс должен учесть 2 раза одинаковые установки.

User-Agent: Yandex

Disallow: /shop/

.....

и

User-Agent: *

Disallow: /shop/

.....

поддерживаю Ziby - если для ПС есть свой раздел, раздел * игнорируется

agent - с большой буквы желательно