Спасибо!
И последний вопрос!
Сайт обычный
http://сайт/ - разрешен! но это весь сайт а там лента с новостями.
http://сайт/posts.xml? - запрещен! это и есть эти новости.
получается что вес ссылок с новостей не учтутся поисковиком, так?
Я знаю для чего он нужен )
Allow: /posts.xml?tb= но Disallow: /posts.xml? вот где вопрос...сожрет ли адекша линк вида сайт/папка/posts.xml?tb=
