Помогите с disallow в robots.txt

XB
На сайте с 27.03.2006
Offline
77
543

Помогите составить disallow в robots.txt .

Нужно запретить к индексации поисковиками страницы вида

/?mod=a&c=a&b=1&page=1

/?mod=a&c=a&b=2&page=200

При этом надо не затронуть страницы вида

/?mod=a&c=a&b=1&a=1

/?mod=a&c=a&b=2&a=200

Насколько я знаю, можно это все дело прописать шаблоном. Не подскажете, как? Знаю, что гугл шаблоны воспринимает, а как с этим делом у Яши? Самое главное. чтобы он понял.

Заранее большое спасибо. :)

Анкор ищет себе хозяина с красивым урлом (http://).
one
На сайте с 15.04.2007
Offline
336
one
#1

а <noindex> rel=nofollow отменили уже?

Решения для автоматизации действий ( https://www.facebook.com/automationstudio20/ ) в интернете.
XB
На сайте с 27.03.2006
Offline
77
#2
one:
а <noindex> rel=nofollow отменили уже?

Хотелось бы удалить и как можно быстрее страницы, которые уже попали в индекс.

Они уже заменены другими, а у этих скрипты перегружают сервер.

T
На сайте с 11.08.2005
Offline
181
#3

Как подобное реализовать для Google описано здесь: Справочный центр для веб-мастеров

Яндекс, насколько мне известно, шаблоны не понимает.

Небольшая цитата в тему:

... робот Googlebot поддерживает расширенное определение стандарта. Он распознает строки Allow:, а также соответствия шаблону * и $. Поэтому когда инструмент показывает строки с такими расширениями в числе распознанных, то нужно учитывать, что это, скорее всего, применимо только к роботу Googlebot и не обязательно подходит другим роботам, которые могут сканировать ваш сайт.
one
На сайте с 15.04.2007
Offline
336
one
#4
Xenos_by:
Хотелось бы удалить и как можно быстрее страницы, которые уже попали в индекс.
Они уже заменены другими, а у этих скрипты перегружают сервер.

Для гугла зайди в вебмастерс тулс и удали нужные страницы...

regta
На сайте с 15.04.2006
Offline
320
#5

А параметры в строке урла менять можно:

из

/?mod=a&c=a&b=1&page=1

/?mod=a&c=a&b=2&page=200

сделать

/?page=1&mod=a&c=a&b=1

/?page=200&mod=a&c=a&b=2

Если - да, тогда заменить все относительные ссылки внутри сайта и вся задача сведется к:

User-agent: *

Disallow: /?page

Цитируйте, плиз, историю переписки в личке. Спасибо.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий