kievrent: у меня было как-то подобное. Потом вспомнил, что сменил хостера и заливал на старый хостинг (который еще работал).
ТС, перепроверьте ;)
Спасибо, но я хостера не менял, но у меня там лежит еще один сайт. У того роботс отображается верно... Но может быть это и правда как-то связано с размещение баз данных на хостинге?
makc-dzr добавил 29.03.2011 в 00:15
Sano000: может быть кэш на стороне клиента, сервера
редирект в .htaccess или редирект в конфигах апача.
Можно сбросить кеш браузера (если есть сторонние кешенирующие трафик программы, сбросить и в них), а потом проверить .htaccess. Остальное - только к хостеру.
Cпасибо за советы! Нет, редиректа в .htaccess нет, про кеш не совсем понял - как это может влиять на роботс...
Может быть и правда попробовать обратиться к хостеру, но что самое интересно - на другой сайте на этом же хостинге с роботсом все ОК.
ZoomY: User-agent: *
так какой роботс показывается при открытии site.com/robots.txt? Этот непонятный? Значит он там и залит, залейте правильный роботс.
Да, открывается непонятный роботс...
Уважаемый, если бы это было так просто - это было бы уже сделано =)
В корне лежит правильный роботс. Я перерыл весь хостинг - того неправильного роботса нет нигде! =)
Возможно. Не могу сказать, что являюсь большим специалистом в составлении роботса - мзучил несколько статей, пришел к выводу, что такой вариант включает все)
_aleksey_: 1. Зарегистрируйся сайтом в панели вебмастера.
2. СОбери список из 5-10 разнотипных "мусорных страниц" своего сайта (фидбек, трекбек)
3. Проверь отшивает ли их роботс.тхт или нет
Все сделал, обнаружил, что роботс блокирует не все страницы - в частности, попадаются страницы из фида.
.htaccess проверяли? Может там редирект с .txt или с robots.txt
Вызовите в браузере robots.txt?v=123 (может кеш я хз)
Что я только не проверял...)
_________________________
Спасибо всем, проблема решена - оказывается ошибка у хостера. Особенное спасибо Дикому СТуденту =)
Была у кого-то недавно аналогичная проблема - тоже левый роботс вылез. Пинайте хостера.
Да, спасибо, отправил вчера еще письмо хостеру, жду ответа.. Но непонятно, почему именно роботс и откуда он взялся =)
у меня было как-то подобное. Потом вспомнил, что сменил хостера и заливал на старый хостинг (который еще работал).
ТС, перепроверьте ;)
Спасибо, но я хостера не менял, но у меня там лежит еще один сайт. У того роботс отображается верно... Но может быть это и правда как-то связано с размещение баз данных на хостинге?
makc-dzr добавил 29.03.2011 в 00:15
может быть кэш на стороне клиента, сервера
редирект в .htaccess или редирект в конфигах апача.
Можно сбросить кеш браузера (если есть сторонние кешенирующие трафик программы, сбросить и в них), а потом проверить .htaccess. Остальное - только к хостеру.
Cпасибо за советы! Нет, редиректа в .htaccess нет, про кеш не совсем понял - как это может влиять на роботс...
Может быть и правда попробовать обратиться к хостеру, но что самое интересно - на другой сайте на этом же хостинге с роботсом все ОК.
User-agent: *
так какой роботс показывается при открытии site.com/robots.txt? Этот непонятный? Значит он там и залит, залейте правильный роботс.
Да, открывается непонятный роботс...
Уважаемый, если бы это было так просто - это было бы уже сделано =)
В корне лежит правильный роботс. Я перерыл весь хостинг - того неправильного роботса нет нигде! =)
да-да, на джумловский похож...
при переходе на адрес роботса сайта показывает этот непонятный роботс...
Да, роботс находится в корне сайта.
сказали, что роботс составлен неплохо) сайт evrosports.ru
Роботс, соответственно:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-content/
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /tag
Disallow: /page/
Disallow: /2011/*/*
Disallow: /2010/*/*
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-content/
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /tag
Disallow: /page/
Disallow: /2011/*/*
Disallow: /2010/*/*
Host: evrosports.ru
Sitemap: http://evrosports.ru/sitemap.xml.gz
Sitemap: http://evrosports.ru/sitemap.xml
P.S. Поступило предложение добавить disallow: /*.html/ в роботс - насколько корректна такая запись?
Возможно. Не могу сказать, что являюсь большим специалистом в составлении роботса - мзучил несколько статей, пришел к выводу, что такой вариант включает все)
1. Зарегистрируйся сайтом в панели вебмастера.
2. СОбери список из 5-10 разнотипных "мусорных страниц" своего сайта (фидбек, трекбек)
3. Проверь отшивает ли их роботс.тхт или нет
Все сделал, обнаружил, что роботс блокирует не все страницы - в частности, попадаются страницы из фида.
отправляю в ЛС)
отправлен в ЛС