robots.txt для яндекса

123 4
J
На сайте с 04.12.2006
Offline
37
2100

как сконфигурировать robots.txt , чтобы ТОЛЬКО яндекс не индексировал сайт дальше морды ?

Каширин
На сайте с 03.01.2004
Offline
1018
#1

User-Agent: Yandex

Disallow: /

Запрещает индексацию всего сайта. C вас пицот вэмэзэ за консультацию ;)

P.S. Или вам нужно только морду индексировать, а остальное - нет?

J
На сайте с 04.12.2006
Offline
37
#2
Каширин:
P.S. Или вам нужно только морду индексировать, а остальное - нет?

только морду

Dybra
На сайте с 23.10.2005
Offline
84
#3

User-Agent: Yandex

Disallow: /a*

Disallow: /b*

Disallow: /c*

Disallow: /d*

......

Disallow: /z*

C вас тысячу за консультацию! 500 мне и 500 Каширину, я у него первую сточку "скопипастил". :)

Мы из ВЫКСЫ (http://wyksa.ru)!
J
На сайте с 04.12.2006
Offline
37
#4

А это точно ?

У меня сайт построен на движке Slaed СMS , и там большинство страниц имеют урл вида:

http://www.site.ru/index.php?name=Pages&op=page&pid=8&pagenum=2.

Нужно чтобы проиндексировалась ТОЛЬКО морда : http://www.site.ru/

andrej-ilin
На сайте с 28.03.2005
Offline
42
#5

User-Agent: Yandex

Disallow: /index.php

andrej-ilin@yandex.ru
J
На сайте с 04.12.2006
Offline
37
#6
andrej-ilin:
User-Agent: Yandex
Disallow: /index.php

но ведь index.php и есть морда .

http://www.site.ru/ и http://www.site.ru/index.php одна и та же страница ,

только http://www.site.ru/index.php нигде не фигурирует (во всех внутренних страницах стоит ссылка не на http://www.site.ru/index.php , а на http://www.site.ru/ )

Dybra
На сайте с 23.10.2005
Offline
84
#7
jkljkljkl:
но ведь index.php и есть морда .
http://www.site.ru/ и http://www.site.ru/index.php одна и та же страница ,
только http://www.site.ru/index.php нигде не фигурирует (во всех внутренних страницах стоит ссылка не на http://www.site.ru/index.php , а на http://www.site.ru/ )

/ - это индексная страница (морда), имя которой может быть любой, в том числе и index.php. Так что ставьте, не сомневайтесь.

J
На сайте с 04.12.2006
Offline
37
#8

Т.е. если я поставлю запрет на индексацию index.php , то морда все равно проиндексируется , т.к. для Яндекса http://www.site.ru/ и http://www.site.ru/index.php разные страницы ?

Dybra
На сайте с 23.10.2005
Offline
84
#9
jkljkljkl:
Т.е. если я поставлю запрет на индексацию index.php , то морда все равно проиндексируется , т.к. для Яндекса http://www.site.ru/ и http://www.site.ru/index.php разные страницы ?

Да. Индексной может быть index.html default.asp или вообще любая другая страница указанная в настройках сервера или в .htacsess

[Удален]
#10

только тогда вес с внутренних на морду передаваться не будет

123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий