Яндекс ничего не знает о том, что вы вложили и откуда это взяли. Яндекс умеет только делать HTTP-запросы к серверу и получать готовые ответы, которые подготовил сервер. Ему не надо знать ничего о том, что происходит на стороне сервера, он и не может это узнать.
Так понятно?
Предлагаю прекратить флуд, а личные вопросы задавать через систему ЛС.
А зря. Финансы - хорошая тема.
:)))))))))))
Кидальщик подтянулся с асей 371240145.
Будьте бдительны, он может сделать еще клонов.
Вы до сих пор не знаете одну важную вещь.
Если не написано Disallow, значит можно индексировать.
Запрещено только то, что написано в Disallow
Там закладка "Сравнить продукты", нажмите ее, не бойтесь, это не страшно.
Трудно зайти на сайт Касперского?
Вы понимаете, что эти два варианта абсолютно идентичны?
User-agent: Mediapartners-Google*
Disallow: /user/
Allow: /articles/
А что тут я написал непонятного? Уберите одну строку. Какое слово непонятно?
Если вы не знаете, что означает слово Allow и Disallow и за 5 лет пребывания на форуме не смогли прочитать http://help.yandex.ru/webmaster/?id=996567, то вам помочь будет крайне проблематично.