makc-dzr

Рейтинг
21
Регистрация
13.12.2010
codemorgan:
.htaccess проверяли? Может там редирект с .txt или с robots.txt

Вызовите в браузере robots.txt?v=123 (может кеш я хз)

Что я только не проверял...)

_________________________

Спасибо всем, проблема решена - оказывается ошибка у хостера. Особенное спасибо Дикому СТуденту =)

Дикий пионер:
Была у кого-то недавно аналогичная проблема - тоже левый роботс вылез. Пинайте хостера.

Да, спасибо, отправил вчера еще письмо хостеру, жду ответа.. Но непонятно, почему именно роботс и откуда он взялся =)

kievrent:
у меня было как-то подобное. Потом вспомнил, что сменил хостера и заливал на старый хостинг (который еще работал).
ТС, перепроверьте ;)

Спасибо, но я хостера не менял, но у меня там лежит еще один сайт. У того роботс отображается верно... Но может быть это и правда как-то связано с размещение баз данных на хостинге?

makc-dzr добавил 29.03.2011 в 00:15

Sano000:
может быть кэш на стороне клиента, сервера
редирект в .htaccess или редирект в конфигах апача.

Можно сбросить кеш браузера (если есть сторонние кешенирующие трафик программы, сбросить и в них), а потом проверить .htaccess. Остальное - только к хостеру.

Cпасибо за советы! Нет, редиректа в .htaccess нет, про кеш не совсем понял - как это может влиять на роботс...

Может быть и правда попробовать обратиться к хостеру, но что самое интересно - на другой сайте на этом же хостинге с роботсом все ОК.

ZoomY:
User-agent: *
так какой роботс показывается при открытии site.com/robots.txt? Этот непонятный? Значит он там и залит, залейте правильный роботс.

Да, открывается непонятный роботс...

Уважаемый, если бы это было так просто - это было бы уже сделано =)

В корне лежит правильный роботс. Я перерыл весь хостинг - того неправильного роботса нет нигде! =)

да-да, на джумловский похож...

при переходе на адрес роботса сайта показывает этот непонятный роботс...

Да, роботс находится в корне сайта.

сказали, что роботс составлен неплохо) сайт evrosports.ru

Роботс, соответственно:

User-agent: *

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-content/

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: */trackback

Disallow: */*/trackback

Disallow: */*/feed/*/

Disallow: */feed

Disallow: /*?*

Disallow: /tag

Disallow: /page/

Disallow: /2011/*/*

Disallow: /2010/*/*

User-agent: Yandex

Disallow: /cgi-bin

Disallow: /wp-content/

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: */trackback

Disallow: */*/trackback

Disallow: */*/feed/*/

Disallow: */feed

Disallow: /*?*

Disallow: /tag

Disallow: /page/

Disallow: /2011/*/*

Disallow: /2010/*/*

Host: evrosports.ru

Sitemap: http://evrosports.ru/sitemap.xml.gz

Sitemap: http://evrosports.ru/sitemap.xml

P.S. Поступило предложение добавить disallow: /*.html/ в роботс - насколько корректна такая запись?

Возможно. Не могу сказать, что являюсь большим специалистом в составлении роботса - мзучил несколько статей, пришел к выводу, что такой вариант включает все)

_aleksey_:
1. Зарегистрируйся сайтом в панели вебмастера.
2. СОбери список из 5-10 разнотипных "мусорных страниц" своего сайта (фидбек, трекбек)
3. Проверь отшивает ли их роботс.тхт или нет

Все сделал, обнаружил, что роботс блокирует не все страницы - в частности, попадаются страницы из фида.

отправляю в ЛС)

отправлен в ЛС

1 2345 6
Всего: 53