Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Такие строки в robots.txt правильные?

S_A_N_T_A
На сайте с 23.11.2009
Offline
154
S_A_N_T_A
622

Такие строки в robots.txt правильные? Или я чего лишнего переписал?

Disallow: /index.php

Disallow: /index.php?

Disallow: /index.php?*

Disallow: /index.php?*/

Disallow: /index.php*

Disallow: /index.php*/

Disallow: /gallery*/

Мне нужно чтобы все урлы где встречается, то что приведено ниже, не индексировались:

index.php

?

gallery

Например удалить такие адреса:

site.ru/gallery/tratata

site.ru/index.php/tratata

site.ru/index.php/tratata/tratata

site.ru/index.php?tratata

site.ru/index.php/?tratata

site.ru/index.php/?tratata/tratata

и т.д.

---------- Добавлено 05.03.2012 в 07:45 ----------

Или вот такой роботс будет правильнее? -

Disallow: /*index.php

Disallow: /gallery*/

Disallow: /*?

H
На сайте с 04.04.2008
Offline
160
hellworm
#1

Как пример можете посмотреть - http://www.ozon.ru/robots.txt

А правильнее будет так:

Disallow: /*gallery

Disallow: /*?

Disallow: /*index.php

Егор Павличенко
На сайте с 03.12.2011
Offline
81
Егор Павличенко
#2

Всегда сверяйте Ваши ожидания от robots.txt с реальностью Яндекса http://webmaster.yandex.ru/robots.xml

Оба варианта запретят, приведенные УРЛы, но "правильней" второй вариант.

богоносец
На сайте с 30.01.2007
Offline
774
богоносец
#3
S_A_N_T_A:
Disallow: /index.php
Disallow: /index.php?
Disallow: /index.php?*
Disallow: /index.php?*/
Disallow: /index.php*
Disallow: /index.php*/

Они все равнозначны

Disallow: /index.php

Ещё можете

https://money.yandex.ru//index.xml

palarmaz
На сайте с 05.04.2010
Offline
125
palarmaz
#4

Кстати, а если поставить Disallow: / на пару дней, а в это время зайдет поисковик, он не выкинет сайт из индекса?

H
На сайте с 04.04.2008
Offline
160
hellworm
#5
palarmaz:
Кстати, а если поставить Disallow: / на пару дней, а в это время зайдет поисковик, он не выкинет сайт из индекса?

Возможно, но врятли. Обычно в течении нескольких недель. 🙄

El_grapaduro
На сайте с 01.09.2008
Offline
315
El_grapaduro
#6
hellworm:
Возможно, но врятли. Обычно в течении нескольких недель. 🙄

А то и месяцев)

V7
На сайте с 03.10.2011
Offline
40
vadim740
#7

посмотри рекомендации по робот текст от яши и все станет ясно.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий