Cтраницы с www и без

Ryan
На сайте с 04.12.2007
Offline
36
461

Совсем недавно обратил внимание на адреса своих страниц: одни с www. другие без.

В итоге проиндексированных страниц у Яндекса с www - 102 и без - 574; у Google: 66/317

Раньше не знал, что для поисковиков это имеет значение, а сегодня полазил по форуму и... призадумался. Что посоветуете делать?

Продаю Semonitor Expert за 3000 wmr (/ru/forum/518053)
ARCOS
На сайте с 15.09.2005
Offline
131
#1

Посоветуем прописать директиву Host в вашем файле robots.txt, который положить в корень сервера, это поможет Яндексу определить основном домен сайта.

А для Google, посоветуем добавить сайт в "Инструменты для Веб-мастера" от Гугл и в одном из разделов указать основной домен с www (или без www).

И со временем основной домен будет выбран поисковиками.

Ryan
На сайте с 04.12.2007
Offline
36
#2
ARCOS:
Посоветуем прописать директиву Host в вашем файле robots.txt, который положить в корень сервера

Приведите, пожалуйста, пример, а то я не силён в robots'ах.

А для Google, посоветуем добавить сайт в "Инструменты для Веб-мастера" от Гугл и в одном из разделов указать основной домен с www (или без www)

А какой лучше: у которого больше страниц проиндексированно или меньше? Есть ли разница?

K
На сайте с 31.01.2001
Offline
737
#3

Ryan, пожалуйста, посетите FAQ Яндекса и этого форума.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
AcidBurn
На сайте с 16.01.2006
Offline
60
#4

немного добавлю, для ускорения переиндексации проставьте все урлы на сайте с www и поставьте на сайт свеженьких ссылок.

User-Agent: *

Host: www.site.ru

Ставь с www

ARCOS
На сайте с 15.09.2005
Offline
131
#5
Ryan:
Приведите, пожалуйста, пример, а то я не силён в robots'ах.

Пример уже привели.

Ryan:
А какой лучше: у которого больше страниц проиндексированно или меньше? Есть ли разница?

Разницы никакой, как больше нравиться.

Tolum
На сайте с 18.01.2006
Offline
75
#6

по яндексу тут можно почитать http://webmaster.yandex.ru/faq.xml?id=508490#whatismirror

Что-то вроде женского журнала (http://nbtrends.com/)
Ryan
На сайте с 04.12.2007
Offline
36
#7

Спасибо! .

Не хочу показаться занудой, но как правилнее:

User-Agent: *
Host: www.site.ru

или

User-Agent: *

Disallow: /cgi-bin

Host: www.site.ru

AcidBurn
На сайте с 16.01.2006
Offline
60
#8
Ryan:
Спасибо! .

Не хочу показаться занудой, но как правилнее:

или
User-Agent: *
Disallow: /cgi-bin
Host: www.site.ru

Если у вас есть, что закрывать в cgi-bin тогда как вы записали

NickPro
На сайте с 27.07.2007
Offline
20
#9

Ryan, имхо правильнее:

User-Agent: Yandex

Disallow:

Host: www.site.ru

Если хотите что-то запретить к индексации, допишите в Disallow эту папку. И почитайте http://robotstxt.org.ru

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий