Все вопросы по robots.txt

Питон, нет, это на данный момент это не возможно

то есть, ловить эти самые параметры вручную ?

ПС успевает набить несколько сотен таких страниц, причем зачастую вытесняя оригиналы из индекса

Питон, пс их сам не генерит их ему кто-то скармливает ;)

Че, серьезно? *?* не прокатывает?)))

нет, в Clean-param данная конструкция не работает

burunduk, а причем тут клианпарам? Я про дизаллоу. Ничего хорошего там ему с генерацией урлов не понаставят.

Miha Kuzmin (KMY), при том что был вопрос именно про

Вот) И это - дизалоу)

не самый хороший вариант ;)

burunduk, дада, гораздо лучше разбирать урл на уровне движка, а не .htaccess, проверять откуда ссылка (парсить страницу), парсить данные домена, и принимать решение - 404 или 301))))))))))))))))))