robots.txt - как правильно закрыть от индексации страницы

Заключи ссылку в тег "noindex" (для Яндекса) и пропиши свойство "rel=nofollow" (для Гугла) в <a href...>. Должно получиться так:

<noindex><a href="путь ссылки" rel="nofollow">картинка баннера</a></noindex>

Allow: /tovari-new/sort3da&500

Allow: /tovari-old/sort2hj&203

Allow: /tovari-rasprodaga-sort1

Disallow: /*sort

что на форуме о ПС делают люди не знающие о гугле

Я пол дня тискал, пробовал неполучаеться внести баннер в этот тег.

Скажите как внедрить этот тег noindex nofollow в баннер?

Например в вот этот:

<a href="http://forcehammer.ru/" mce_href="http://forcehammer.ru" target="_blank"><img src="http://forcehammer.ru/wp-admin/images/banners/force.gif" mce_src="http://forcehammer.ru/wp-admin/images/banners/force.gif" width="88" height="31" border="0" alt="Самый информационный блог по бодибилдингу и пауэрлифтингу"></a>

П,С. несочтите за рекламму, нужна помощь!

1. <noindex></noindex> - это тег для Яндекса запрещаюший индексацию заключенного в нем фрагмента.

2. rel="nofollow" - это атрибут для тега <a>, который действует для Гугла, в результате его применения последний не учитывает ссылки, содержащие этот параметр.

<noindex><a href="http://forcehammer.ru/" mce_href="http://forcehammer.ru" target="_blank" rel="nofollow"><img src="http://forcehammer.ru/wp-admin/images/banners/force.gif" mce_src="http://forcehammer.ru/wp-admin/images/banners/force.gif" width="88" height="31" border="0" alt="Самый информационный блог по бодибилдингу и пауэрлифтингу"></a></noindex>

SAF, в Вам нужно дублирующийся контент только под Яндексом чистить? Если не только, тогда посоветую другой вариант, не через robots.txt. Если у Вас один и тот же контент виден под разными URL, связанными с сортировками и прочими динамическими параметрами, тогда возможно Вам будет проще на дублях добавлять в метатеги:

<meta name="robots" content="noindex, nofollow">

Вариант менее эффективный с точки зрения трафика, но более гибкий с точки зрения управления индексацией.

Скажите кто знает, а рекламные тизеры учитываются ПС как ссылки на сайт? Если да то как их можно закрыть от индексации для google?

Подскажите а правильно ли я закрыл, категорию :

http://site.ru/soft/11843-priklyu-ravvina-yakova.html

http://site.ru/musik/4578-horoshaja-melodia.html

Dissalow: /soft

Dissalow: /musik

При этом все страницы в этой категории не будут индексироваться?

Во-первых, директива пишется так - Disallow.

Во-вторых, вы закрыли не только директории /soft/ и /musik/, но и файлы, типа /soft.php, /musik.html и т.д. Если нужно закрыть именно папки, то:

Disallow: /soft/

Disallow: /musik/

А если надо закрыть только указанные выше страницы, то:

Disallow: /soft/11843-priklyu-ravvina-yakova.html

Disallow: /musik/4578-horoshaja-melodia.html