-Ну так как, Яндекс берется за помощь всем, у кого эта проблема возникла? Бесплатно? :) Давайте договоримся, что свои проблемы они решать будут сами, а проблемы Яндекса пусть решает Яндекс.
-передаются, например, Фио и контактные данные с пометкой "срочно перезвоните мне, и мы обсудим там чего-то". Это заказ, а не покупка - оплаты пока нет.
И все же, вред я показал. В данном случае Яндекс создаст проблемы этому сайту, при этом "все что могли" в плане robots.txt они сделали.
- а можно чужим влезть? :)
Придется повториться в третий раз, и расписать все подробно.
Есть инет-магазин, и в нем ввод заказа в форму с кнопкой, которая оформляет заказ и радостно выдает страницу с параметрами заказа (типа "заказ удался, вам выставлен счет с таким-то номером и тд, запомните его!"). Человеку лень это запоминать, и он заносит страницу в закладки. А надо сказать, что параметры по глупости пересылали методом get, и они в урле присутствуют, и в закладках эта страница появилась. Опять-же, кеширование было вечное у этой страницы, поэтому повторные заходы броузеров никого не беспокоили. А о поисковых системах не думали - они же в форму данные подставлять не умеют. Ну, на всякий случай закрыли robots.txt.
И что же? Вот вам и вред от вашего робота, многократно выполняющего скрипт. Ситуация придуманная, но более чем реальная. Каждый "заказ" ведет к затратам времени=денег на бессмысленное переругивание с бывшим заказчиком. Аргументы типа "можно анализировать заголовки" - не годятся, ибо создатели сайта ничего НЕ ОБЯЗАНЫ делать.
Упоминалась ситуация с проверкой ссылок в каталогах. Но в каталог страницы по доброй воле заносят, и не имеют против, если происходит проверка.
-то, что она вами трактуется в вашу же пользу, неудивительно :)
- а если так рассуждать, robots.txt вообще не нужен, получается? Ведь любой очень желающий может закрыть свой сайт без использования robots.txt, определяя параметры запроса.
Так ведь нет, зачем-то придумали все запреты в стандартном виде выкладывать в файл...
И, в конце концов, не имеет смысла говорить что ДОЛЖНЫ делать владельцы сайтов, чтобы защититься от этого всего, а лучше вспомнить о том, что РОБОТЫ должны делать.
wawa:
-по сути же вопроса, wolf прав. И совет В.Иванову: Надо все-таки проработать свою позицию более тщательно, возможно, вместе с более "официальными" представителями Яндекса. А то можно далеко зайти.
Например, завтра окажется, что Яндекс нанес кому-то ущерб (например, генерацией пустых заказов). И как будете отплевываться?
А кого это ёжит? Нельзя - значит, нельзя! Например, я закрыл от индексации ссылки определенного вида, нажатие на которые означает покупку в и-магазине, а чел занес это дело в закладки. И что? будет регулярно генериться по заказу с параметрами этого юзера? Неудобно-с.
Скрипту-то все равно, HEAD запрос или GET, он отрабатывает и делает заказ.
-Похоже на то, что при поиске #link="tosite.ru*" ссылки с "непотных" :) сайтов не выдаются, проверял на разных ссылках с форумов. Наверное, это именно тот случай - они не учитываются. Т.обр., найти на site.ru ссылку на tosite.ru и проверить #link="tosite.ru*" #url="site.ru*"
Действительно, утомительное :)
Да этих сайтов, возможно, много. Да и разозлился я, на всех ресурсах одно и то же... :) Наверное, это был просто повод...
Я, кстати, bannerpoint 100х100 со своего сайта убрал именно из-за этих "фото". Так ведь харя теперь на нижнем баннере мелькает.. что делать, не знаю :(
Раздражает, а бывает, когда оба баннера рядом - с мордой.
Расшифруй. Писал ты, видимо, для китайцев :)
Не только читать и понимать, но и нормально говорить.