банальная подготовка сайта к продвижению снимает все вопросы, и лишнего в роботс закрывать не потребуется.
кроме того, если на сайтах имеются дубли, с чего автор материала решил, что это именно его методы повлияли на падение сайта, а не сам факт дублей
В каждом конкретном случае проблемы свои. Вот несколько возможных:
1) Дубли/нечеткие дубли главной внутри сайта.
2) Переспам главной по вхождениям/"тошноте"
3) Более релевантный запросу контент на внутряке
4) Неверное распределение весов внутри сайта - проблемы (или отсутствие) перелинковки
постраничный 301+исключенный из переадресации robots = идеальный вариант для переклейки в условиях полного соответствия сайтов
Возможно, основные причины такого поведения сайта
1) ваш контент украли, и то, что вы - первоисточник, уже не играет роли, как видите:
http://yandex.ru/yandsearch?text=%22%D0%A5%D0%BE%D1%82%D0%B8%D1%82%D0%B5%20%D1%81%D0%BD%D1%8F%D1%82%D1%8C%20%D0%BA%D0%B2%D0%B0%D1%80%D1%82%D0%B8%D1%80%D1%83%20%D0%BF%D0%BE%D1%81%D1%83%D1%82%D0%BE%D1%87%D0%BD%D0%BE%20%D0%B2%20%D0%9A%D0%B0%D0%B7%D0%B0%D0%BD%D0%B8%3F%20%D0%9D%D0%B0%D1%88%D0%B0%20%D0%BA%D0%BE%D0%BC%D0%BF%D0%B0%D0%BD%D0%B8%D1%8F%20%D1%80%D0%B0%D0%B4%D0%B0%20%D0%BF%D1%80%D0%B5%D0%B4%D0%BB%D0%BE%D0%B6%D0%B8%D1%82%D1%8C%20%D0%92%D0%B0%D0%BC%20%D1%81%D0%B2%D0%BE%D0%B8%20%D1%83%D1%81%D0%BB%D1%83%D0%B3%D0%B8.%20%D0%9C%D1%8B%20%D0%B7%D0%B0%D0%BD%D0%B8%D0%BC%D0%B0%D0%B5%D0%BC%D1%81%D1%8F%20%D0%BF%D0%BE%D1%81%D1%83%D1%82%D0%BE%D1%87%D0%BD%D0%BE%D0%B9%20%D0%B0%D1%80%D0%B5%D0%BD%D0%B4%D0%BE%D0%B9%20%D0%BA%D0%B2%D0%B0%D1%80%D1%82%D0%B8%D1%80%20%D0%B2%20%D0%9A%D0%B0%D0%B7%D0%B0%D0%BD%D0%B8%20%D1%83%D0%B6%D0%B5%20%D0%B1%D0%BE%D0%BB%D0%B5%D0%B5%205%20%D0%BB%D0%B5%D1%82.%20%D0%91%D0%BE%D0%B3%D0%B0%D1%82%D1%8B%D0%B9%20%D0%BE%D0%BF%D1%8B%D1%82%20%D0%BF%D0%BE%D0%B7%D0%B2%D0%BE%D0%BB%D1%8F%D0%B5%D1%82%20%D0%BD%D0%B0%D0%BC%20%D0%B2%D1%81%D0%B5%D0%B3%D0%B4%D0%B0%20%D1%83%D1%87%D0%B8%D1%82%D1%8B%D0%B2%D0%B0%D1%82%D1%8C%22&clid=46510&lr=213&rd=0
вы на втором месте
2) дубли внутри сайта. кликаем на ссылку "еще" и видим - дубль главной /index.php, видим что блок "Хотите снять квартиру посуточно в Казани?" повторяется многократно.
3) поиск по сайту не закрыт от индексации
4) главная вообще "не очень" по мнению Яндекса - всего 9я в поиске по сайту - http://yandex.ru/yandsearch?text=&clid=46510&lr=213&site=flat-kazan.ru. Работайте с весом продвигаемых страниц путем правильной перелинковки.
5) И удалите каталог партнеров. Если не хотите удалять - хотя бы уберите html ссылки на него со страниц 2 уровня и главной
P.S.
доставило: http://www.flat-kazan.ru/uslugi/taxi-kazan1 - подставь любую цифру и получи дубль на любой вкус! работает на многих страницах 3го уровня :)
есть ли на сайте что-то вроде глоссария?
оставьте редирект, но файл robots.txt под него попадать не должен, только и всего
легко доказывается снятием гарантий
есть изменения, хотя не везде. тренажерка стоит пока
Просто дополните ваш редирект
RewriteCond %{HTTP_HOST} ^www\.
RewriteCond %{REQUEST_URI} !^/robots\.txt$
RewriteRule ^(.*)$ http://domain.ru/$1 [R=301,L]
отредактировать скрипт + раз меняете адреса страниц сделайте переклейку старых адресов