robots.txt и Google или как закрыть страницы от индексации

Nktzz, в ВМТ выбираете сайт -> конфигурация -> Параметры URL

можно указать боту какие параметры в ссылке страницы не учитывать. Попробуйте указать там.

Тоже не всегда работает и есть куча примеров.

спасибо, было сделано заранее

этого как раз делать не стоит

например есть ссылка типа:

...php?sort=1&order=88

вы говорите что параметр sort не учитывать

и потом робот у вас долбится в адрес:

...php&order=88

а такой адрес ни апач, ни энженикс не обрабатывают

то есть на выходе в лучшем случае 4хх ошибка, а то и 5хх

и потом в ошибках всё это копится

Это из практики

OlegEk, а как в таком случае посоветуете поступить?

Успокоиться, www.google.ru/#!Pentagon вошёл в каждый комп! И про вас тоже всё знает. Нельзя было проигрывать холодную войну!

inurl:sort

кэшей нету, попробуйте добавить в запрос какое-нибудь слово с этих страниц, которого в урле и тайтле нету.