нужна помощь в Robots.txt

R
На сайте с 24.01.2008
Offline
180
597

Ребят подскажите подскажите как правильно прописать роботс. Нужно указать хост, карту сайта и запретить индексировать определенные страницы.

Вот эти страницы нужно запретить:

http://www.site.ru/goro.html?f=2010 (нужно запретить именно ?f=2010 - Вместо 2010 может стоять любое другое число)

http://www.site.ru/megon.html?print=1

Удаление вирусов с сайта, защита сайта, Гарантия! ( /ru/forum/999073 ) -> топик на маулталк ( http://www.maultalk.com/topic113834s0.html ) -> Топик в сапе ( http://forum.sape.ru/showthread.php?t=79363 ). TELEGRAM - https://t.me/Doktorsaitov
fan
На сайте с 08.07.2005
Offline
142
fan
#1

А что сложного?

User-agent: *

Disallow: /*?f=

Disallow: /megon.html?print=

User-agent: Yandex

Disallow: /*?f=

Disallow: /megon.html?print=

Host: www.site.com

Sitemap: http://mysite.ru/site_structure/my_sitemaps1.xml

RippleNet
На сайте с 09.12.2010
Offline
74
#2

(Для Яндекса)

User-agent: Yandex

Disallow: /goro.html?f=2010

Disallow: /megon.html?print=1

(Если нужно указать для Яндекса главное зеркало, то пишем)

Host: site.ru

(Для Гугла и остальных)

User-agent: *

Disallow: /goro.html?f=2010

Disallow: /megon.html?print=1

(И если есть карта сайта, то)

Sitemap: http://site.ru/sitemap.xml

SM
На сайте с 02.07.2007
Offline
131
#3
Rxp:
Ребят подскажите подскажите как правильно прописать роботс. Нужно указать хост, карту сайта и запретить индексировать определенные страницы.

Вот эти страницы нужно запретить:

http://www.site.ru/goro.html?f=2010 (нужно именно запретить ?f=2010 - Вместо 2010 может стоять любое другое число)

http://www.site.ru/megon.html?print=1

так и пишите в роботсе

Disallow: /goro.html?f=*

Disallow: /megon.html?print=*

ps вот это обилие советов )) выбирайте однако )) все рабочие!

найди путь для использования мира под свои нужды продается завод пищевой промышленности в Свердловской области!
K
На сайте с 31.01.2001
Offline
737
#4

sasha_mtrx, нафига звездочки, для красоты?

Они там и так всегда подразумеваются (если на конце нет $).

А что это за феерический промежуток между строками? Так работать не будет. Незачот.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
R
На сайте с 24.01.2008
Offline
180
#5

Может я не так объяснил в первом посту, мне нужно закрыть от индексации ссылки с

?f=2010

?print=1

fan
На сайте с 08.07.2005
Offline
142
fan
#6

Я вам так и написал. Только вместо megon.html поставьте *

Spaike
На сайте с 30.03.2009
Offline
152
#7
fan:


User-agent: *
Disallow: /*?f=
Disallow: /megon.html?print=

User-agent: Yandex
Disallow: /*?f=
Disallow: /megon.html?print=
Host: www.site.com

Sitemap: http://mysite.ru/site_structure/my_sitemaps1.xml

Скажите, а для чего прописывать для яши отдельно? Он что такой особенный? Это еще год назад среди бомжей пошел популярный слух, что для яши надо делать все отдельно, если хочешь ему понравится :D Видать байка не умерла)

покупаю сайты
fan
На сайте с 08.07.2005
Offline
142
fan
#8

Особенный, ага. Хелп Яндекса почитайте вместо бомжей.

R
На сайте с 24.01.2008
Offline
180
#9
fan:
Я вам так и написал. Только вместо megon.html поставьте *

User-agent: *

Disallow: /*?f=

Disallow: /*?print=

User-agent: Yandex

Disallow: /*?f=

Disallow: /*?print=

Host: www.site.com

Sitemap: http://mysite.ru/site_structure/my_sitemaps1.xml

Так правильно?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий