В итоге, получил ответ, отрицательный (вчера отправлял запрос еще один раз, то есть сейчас ответили в течение суток). Таки непонятно, то ли предыдущий запрос они потеряли, то ли тупо отмалчивались...
RibkisMukoi, на протяжении двух недель отправляли еще пару запросов по другим клиентам, там были чисто технические вопросы. Там ответ в течение одного-двух дней приходил. Мне интересно, такие паузы это только с ответами на пересмотр фильтра за переоптимизацию есть? Три недели это о чем вопрос был, если не секрет, конечно?
ha-hanna, Что-нибудь делали перед первым запросом или просто сразу отправили, что, мол, ранжируется неважно?
http://rombick.ru/110.htm - читал, много смеялся. Действительно, за что Яндекс невзлюбил ваш сайт? Видимо, остальные статьи такого же качества. Вы вот что сделайте, абстрагируйтесь от того, что это ваш сайт и попробуйте сами себе ответить на вопрос (только честно) - "интересна и полезна ли эта информация? Не раздражают ли взгляд эти %;?*№:% ссылки страницы на саму себя?".
greatiger, robots.txt зависит от используемой CMS и наличия нежелательных дублей в индексе поисковых систем. Если пользуетесь какой-нибудь популярной системой, поищите в том же Яндексе для нее правильный robots.txt, если же самописка, или статичный сайт, то вбивайте запрос site:ваш_домен и ищите дубли.
Конкретно для вашей проблемы я бы сначала удалил роботс вообще и проверил в ЯВ (http://webmaster.yandex.ua/robots.xml) индексацию главной страницы.
Директива существует, но в данном случае она бессмысленна :) Сайт и так по умолчанию должен индексироваться полностью. А Host прописать - неплохая идея, только, чтоб наверняка, еще и 301-редирект на основное зеркало (с www или без, это уж как вам угодно будет)
dexcolt, а почему вы решили, что юзабилити и дизайн на нуле? Что градиентов прикольненьких нету, да эффект "мокрого пола" нигде не применили? :)
Ну, да, текст визуально слишком плотно смотрится, но, чисто на первый взгляд (конечно, смотрел на сайт секунд 10, явно недостаточно для серьезных выводов) все, что мне понадобилось бы по этой тематике я там бы и нашел. Посмотрите разницу по запросам с и без учета ПФ, может, в этом все дело?
В том-то и фишка, что очередность написания директив теперь не будет иметь смысла - их обработка будет зависеть от длины префикса URL. В примере, я лишь указал, что порядок директив теперь не играет роли. Это и является международным стандартом, к которому стремится Яндекс.
ListOn добавил 13.10.2011 в 17:47
Ну, пример из блога Яндекса же:
User-agent: Yandex
Disallow: /
Allow: /catalog
По старым правилам обработки для индексации запрещен весь сайт, по новым - весь, кроме /catalog
dustyo_O, Директива Allow: /search/map.php$ будет обрабатываться раньше Disallow: */search/, т.к в первом случае префикс URL меньше.
По поводу трех строк в одной - не понял. ТС хочет разрешить два конкретных URL к индексации, если я правильно понял, и тут одной строкой не обойдешься. Но могу и ошибаться, тут, конечно, без примеров адресов не разберешь.
В данном случае ничего не изменится.
Просто раньше в таком варианте:
Disallow: */search/
Allow: /search/map.php$
Allow: /search/$
Disallow: /bitrix/
были бы запрещены для индексации все категории search, а по новым правилам, такой порядок директив будет обрабатываться также, как и указанный вами вариант. То есть первыми будут обрабатываться директивы для более "коротких" URL, независимо от того, в какой последовательности эти директивы будут прописаны.
