Берете страницу с рекламой, открываете, ищете код, который выводит рекламу, это JavaScript из домена yandex.ru. Берете название этого скрипта полностью и вставляете в черный список в настройке антибаннера касперского.
Скажите прямо: нужна кнопка "бабло".
Но ведь может так случиться, что ссылка проиндексируется, а работать так и не начнет.
Все верно. Остальная часть будет индексироваться, если этому не помешает что-то еще.
О, мсье знает толк в извращениях?
А зачем это?
Вспомнил. Если отвечать роботам непотребные ответы вместо того, чтобы просто запретить папку в robots.txt, роботы будут по крайней мере тратить свои ресурсы, чтобы сделать запрос и быть посланными. Поэтому во всех своих FAQ поисковики пишут, как юзать robots.txt и экономить ресурсы роботов, которые можно тратить на что-либо полезное.
А насчет тега <noindex>...</noindex> - он не запрещает индексацию по ссылке, которая находится внутри него, и не запрещает роботам скачивать картинки, которые внутри него. Вроде бы так.
Да, чтобы закрытый текст не находился поиском и не появлялся в сниппетах.
Azam4ik, вы когда открываете wordstat.yandex.ru, прочитайте текст, который там написан.
Там нет статистики запросов и формулировок запросов. Это цифры для расчета количества показов, если закажешь рекламу на эти слова.
А я бы не стал специально выдавать 403 и другие нехорошие ответы только за то, что они роботы поисковиков. Обидятся - будут убытки.
Сложить в папку и запретить индексацию папки в robots.txt.
Если файл так и называется, то и не может повлиять. Файл должен называться robots.txt.
Скрыть картинки тегом <noindex> тоже невозможно.
Maxman, лучше использовать правильную аббревиатуру: РСЯ - Рекламная Сеть Яндекса.
ЯД - это обычно Яндекс-Деньги, не запутывайте народ.