Страницы типа ruwww.site.ru и www.site.ruwww.site.ru/ в выдаче - откуда они?

S
На сайте с 19.05.2011
Offline
73
369

Уважаемые гуру! Взял сайтик на раскрутку, проверил выдачу по нему, и с удивлением обнаружил в выдаче кучу левых страниц по принципу http://ruwww.sitename.ru/ и www.site.ruwww.site.ru/ (см. скрин). Скажите, пожалуйста, откуда они взялись, и как их правильно убрать, причем так, чтобы не допустить их появления в будущем, а не просто оптом загнав в disallow в robots.txt?

Заранее благодарю!

С уважением,

stankriger

png Screenshot_1.png
png Screenshot_2.png
E1
На сайте с 25.10.2012
Offline
28
#1

Надо копать в сторону хостера, т.к. по этим несуществующим поддоменам сервер отдает 200 отклик и для поисковиков это вполне нормальная страница.

Откуда взялись - вариантов много, например когда-то раньше некорректно был настроен редирект с домена www на без www, который и загнал такие домены в индекс.

S
На сайте с 19.05.2011
Offline
73
#2

exchanger_1, спасибо :) А какие вопросы правильно задать хостеру, чтобы он такого больше не допускал? И как правильно закрыть такую "красоту" в роботсе, чтобы лишнего не закрыть? Заранее благодарю :)

E1
На сайте с 25.10.2012
Offline
28
#3

Сначала надо смотреть если у вас в админке хостера возможность создавать поддомены, если возможность есть, а в списке таких нет, спросите почему по несуществующим доменам сервер отдает 200 отклик, а не 404.

В роботс у вас закрыть неполучится , т.к. он закрывает только для домена на котором лежит, т.е. вам нужно будет создавать поддомены (и смотреть сколько их наплодилось) и на них размещать robots с "Disallow: /".

Только нормально настроенный сервер поможет вам корректно выйти из данной ситуации.

S
На сайте с 19.05.2011
Offline
73
#4

Громаднейшее спасибо за четкий и понятный ответ :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий