Помогите составить ROBOTS.TXT

A6
На сайте с 14.04.2011
Offline
1
733

Здравствуйте. Помогите пожалуйста вот с таким вопросом.

Мой сайт: http://luks.by/

Хочу закрыть весь сайт а потом разрешить только те страницы которые мне нужно.

Посмотрите пожалуйста кто нибудь правильно ли я составил данный файл т.к. после пере индексации яндексом запрещенные страницы не пропали из индекса (

я написал вот так:

User-agent: *

Allow: /ru/o-proekte.html

Allow: /ru/podat-objavlenie.html

Allow: /ru/kontakty.html

Allow: /ru/prokat-avtomobilej.html

Allow: /ru/perevodchiki.html

Allow: /ru/dostavka-edy.html

Allow: /ru/press-relizy.html

Allow: /ru/press-relizy/

Allow: /ru/otzyvy.html

Allow: /ru/karta-sajta.html

Allow: /ru/kurs-belorusskogo-rublja.html

Allow: /ru/pogoda-v-minske-belarusi.html

Allow: /ru/poslednie-novosti-iz-belaursi.html

Allow: /ru/shema-metropolitena.html

Allow: /ru/telefonnyj-spravochnik-po-gorodu-minsku-kody-gorodov.html

Allow: /ru/registracija-v-minske.html

Allow: /ru/taksi-minska.html

Allow: /ru/avtovokzaly-minska.html

Allow: /ru/zheleznodorozhnye-vokzaly.html

Allow: /ru/ajeroporty.html

Allow: /ru/dostoprimechatelnosti-belarusi.html

Allow: /ru/dostoprimechatelnosti-belarusi/

Allow: /ru/muzei-minska.html

Allow: /ru/teatry-minska.html

Allow: /ru/gostinicy-minska.html

Allow: /ru/restorany-minska.html

Allow: /ru/kazino-minska.html

Allow: /ru/istorija-minska.html

Allow: /ru/dostavka-cvetov.html

Allow: /ru/kvartira-na-sutki-v-minske.html

Allow: /ru/odnokomnatnaja-kvartira.html

Allow: /ru/dvuhkomnatnaja-kvartira.html

Allow: /ru/trehkomnatnaja-kvartira.html

Allow: /chetyrehkomnatnaja-kvartira.html

Allow: /ru/vip-kvartiry.html

Allow: /ru/kvartiry-s-dzhakuzi-v-minske.html

Allow: /ru/proverennye-kvartiry.html

Allow: /ru/chetyrehkomnatnaja-kvartira/item/113-metro-oktjabr-skaja-kupalovskaja-kvartira-na-sutki-prospekt-nezavisimosti-v-minske.html

Allow: /ru/chetyrehkomnatnaja-kvartira/item/112-metro-nemiga-kvartira-na-sutki-v-troeckom-predmeste-v-minske-s-kondicionerom.html

Allow: /ru/chetyrehkomnatnaja-kvartira/item/85-chetyrehkomnatnaja-kvartira-na-sutki-v-minske-frunzenskaja.html

Disallow: /a

Disallow: /b

Disallow: /c

Disallow: /d

Disallow: /e

Disallow: /f

Disallow: /g

Disallow: /h

Disallow: /i

Disallow: /j

Disallow: /k

Disallow: /l

Disallow: /m

Disallow: /n

Disallow: /o

Disallow: /p

Disallow: /q

Disallow: /r

Disallow: /s

Disallow: /t

Disallow: /u

Disallow: /v

Disallow: /w

Disallow: /x

Disallow: /y

Disallow: /z

Disallow: /0

Disallow: /1

Disallow: /2

Disallow: /3

Disallow: /4

Disallow: /5

Disallow: /6

Disallow: /7

Disallow: /8

Disallow: /9

Disallow: /_

Disallow: /-

Disallow: /~

Disallow: /&

Disallow: /?

Disallow: /%

Disallow: /*;print=1

Disallow: /*?print=1

Disallow: /*print=1

Disallow: */tag/

Host: luks.by

Так же я хочу запретить от индексации страницу http://luks.by/ru/ но не знаю что нужно написать что бы не запретить страницы лежещие в директории /ru/ .

Еще вопрос:

Disallow: */tag/ - эта строчка должна запретить все страницы в адресе которых есть папка /tag/ я прав ? ато у меня так много дубле все никак не могу их закрыть .

Помогите пожалуйста. :o

K
На сайте с 31.01.2001
Offline
737
#1

http://help.yandex.ru/webmaster/?id=996567 - это нужно прочитать и тщательно изучить ДО того, как что-то спрашивать.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
A6
На сайте с 14.04.2011
Offline
1
#2
Kost:
http://help.yandex.ru/webmaster/?id=996567 - это нужно прочитать и тщательно изучить ДО того, как что-то спрашивать.

Ты знаешь я этот материал смотрел НО т.к. я новичок и составляю это файл впервые в жизни то я и пришел на форум что бы спросить совета.

K
На сайте с 31.01.2001
Offline
737
#3

Aleksandr666, а почему бы вместо такой кучи Disallow не написать один:

Disallow: /

если перед ним вы разрешили все необходимое.

A6
На сайте с 14.04.2011
Offline
1
#4
Kost:
Aleksandr666, а почему бы вместо такой кучи Disallow не написать один:

Disallow: /

если перед ним вы разрешили все необходимое.

СПАСИБО ПОНЯЛ.

А КАК ДОЛГО ЖДАТЬ ПОКА ВЫПАДУТ ИЗ ИНДЕКСА ЗАПРЕЩЕННЫЕ СТРАНИЦЫ ?

K
На сайте с 31.01.2001
Offline
737
#5

У вас капслок заело. Так писать некультурно, имейте в виду, что это эквиванентно, как будто вы беспричинно кричите на улице.

overnight
На сайте с 23.05.2008
Offline
262
#6
Aleksandr666:
А КАК ДОЛГО ЖДАТЬ

K
На сайте с 31.01.2001
Offline
737
#7

:D , кстати, "неделю, не меньше" - это точно :)

A6
На сайте с 14.04.2011
Offline
1
#8

Спасибо. :)

cheredov
На сайте с 07.04.2011
Offline
125
#9

ржунимагу.... пгастите за спам )))))))))

Иван Чередов (http://ivan.cheredov.com/about/)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий