ребята подскажите сейчас <doc id="ZD09DF5AA511FC6D5"> так начало показываться да и в xml, не вижу отличий. Помню раньше как-то очень просто можно было отделить быстроробота и спектр.. не напомните?
блин никто не знает или обсуждалось уже?
почему не стоит открывать? Может там специалисты общаются и профиль сделан очень качественно, раскрывает инфу полностью.. как в моем круге например.. будет и траф соответственно
Например на данном ресурсе профили индексируются.. ☝
Тяжело конечно вангавать)
1) Каноникал присваивается и без to=2 и с ним? какой из них канонический?
2) Покажите пример из выдачи, как проиндексировались страницы с iframe, если такие есть то возможно нужно закрыть.---------- Добавлено 15.10.2014 в 11:07 ----------
1) еще раз проверьте в вебмастера, в роботс - точно ли закрыли
2) обычно 2-3 недели примерно удаляются.
http://anonymouse.org/anonwww.html
так не получится?
Тогда скорее всего попадут под тренд сайты на Аяксе :)
на мелких проектах в плюс, на большом минус.. (
похоже твиттером опять вгоняется..
Возможно вебмастер не обновился, проверьте выдачу в ручную.
---------- Добавлено 13.10.2014 в 10:05 ----------
1) Закрывается, общее правило:
User-agent: *
Disallow: */?to=2
Частное правило:
Disallow: /video/item/-n-/?to=2
Можно и так и так, разница лишь в том, что первое закроет на всем сайте, второе закроет в конкретной категории.
В поиск попадает 1 из страниц, поэтому когда уберете дубль, в индексе будут правильные страницы. Появляются из-за особенности CMS.
1.1 Они на данный момент индексируются?
Лучше тут обсуждать.
Вообще, чтобы узнать правильно или нет, нужно видеть URL-ы которые вы хотите закрыть. В целом ошибок не вижу.