Форум Практика оптимизации Любые вопросы от новичков по оптимизации

robots.txt

12
vasilisa1210
На сайте с 27.10.2010
Offline
33
vasilisa1210
477

Подскажите как верно скрыть от Яндекса страницы типа

www.lol.ru/pol/lolopop1.html

www.lol.ru/pol/po2.html

www.lol.ru/pol/llloo2.html

www.lol.ru/pol/jolo/pol3.html и мн мн мн др (их так много, что невозможно перечислить)

При этом оставив видимой страницу

www.lol.ru/pol/

мои варианты:

1) Disallow: /pol*

2) Disallow: /pol/*

верю
M1
На сайте с 13.02.2007
Offline
165
User
#1

1.

Disallow: /pol/p

2.

Allow: /pol/$

Disallow: /pol

vasilisa1210
На сайте с 27.10.2010
Offline
33
vasilisa1210
#2
Mr 13:
Disallow: /pol/p

а если первые буквы страниц разные?

K
На сайте с 31.01.2001
Offline
737
Kost
#3

Disallow: /pol/

Попробуйте почитать help.yandex.ru, здесь без этого нельзя.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
M1
На сайте с 13.02.2007
Offline
165
User
#4
vasilisa1210:
а если первые буквы страниц разные?

Тогда второй вариант из моего поста.

А вообще да, фак читайте.

T
На сайте с 14.01.2011
Offline
1
tishko
#5

Disallow: /pol/*.html

vasilisa1210
На сайте с 27.10.2010
Offline
33
vasilisa1210
#6

хелп я прочитала, но я блондинка....

там не только .html

поэтому получается этот вариант

Allow: /pol/$

Disallow: /pol

Благодарю!

K
На сайте с 31.01.2001
Offline
737
Kost
#7

Сорри, прозевал про видимую страницу.

Да, правильно.

vasilisa1210
На сайте с 27.10.2010
Offline
33
vasilisa1210
#8

Погодите!! Может вот так

Allow: /pol$

Disallow: /pol/

K
На сайте с 31.01.2001
Offline
737
Kost
#9

Смотря на какую страницу у вас стоят ссылки внутри сайта, на /pol или на /pol/

T
На сайте с 14.01.2011
Offline
1
tishko
#10

проверьте в яндекс вебмастере как правильно, на вкладке настройки индексирования>>анализ robots.txt

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий