ребята подскажите сейчас <doc id="ZD09DF5AA511FC6D5"> так начало показываться да и в xml, не вижу отличий. Помню раньше как-то очень просто можно было отделить быстроробота и спектр.. не напомните?
почему не стоит открывать? Может там специалисты общаются и профиль сделан очень качественно, раскрывает инфу полностью.. как в моем круге например.. будет и траф соответственно
Например на данном ресурсе профили индексируются.. ☝
По п.1. кажись разобрался - приставка /?to=2/ появляется из-за подключения связей между объектами. С этим моментом сейчас разбираюсь, с разработчиком модуля каталогов.. Почему то страницам с /?to=2/ присваивается link rel="canonical"
Тогда получается эти страницы нельзя закрывать в robots.txt? или если их закрыть - то ПС начнет индексировать нормальные адреса объектов - без /?to=2/ ???
Да индексируются и страницы самих объектов и iframe к каждой странице объектов.
Тяжело конечно вангавать)
1) Каноникал присваивается и без to=2 и с ним? какой из них канонический?
2) Покажите пример из выдачи, как проиндексировались страницы с iframe, если такие есть то возможно нужно закрыть.
---------- Добавлено 15.10.2014 в 11:07 ----------
Борис С: тоже самое эти мусорные страницы так и есть в поиске, хотя сегодня очередной апдейт был 😕
1) еще раз проверьте в вебмастера, в роботс - точно ли закрыли
yerez: Скорее всего для оценки дизайна у асессоров есть какие-то, например, 3 оценки из серии
1) ужас ужас, нет цсс, синий текст на белом фоне и 3 картинки
2) народ стайл дизайн из прошлого века, что-то где-то поехало или некорректно отображается
3) современный актуальный дизайн
В третью категорию попадет, наверное, большинство сайтов из топов, поэтому эта оценка дизайна является несущественной, поэтому и есть в диалоге призив считать, что этого нет.
Например, в информ тематиках в топах могут стоять такие гхм какашки и собирать тонны трафика. Так что скорее всего эта оценка имеет какой-либо вес только для коммерса.
Тогда скорее всего попадут под тренд сайты на Аяксе :)
Борис С: Как быстро после изменения в robots.txt дубли страниц и прочий мусор пропадет из индексации яндекса? У меня уже 2 недели прошло, а в вебмастере и так индексируется папка и страницы из нее , которые я закрыл в robots ? Папка обычная в корне сайта - то есть ошибиться и написать не так ничего точно не мог
Возможно вебмастер не обновился, проверьте выдачу в ручную.
---------- Добавлено 13.10.2014 в 10:05 ----------
sergik_a: Добрый день!
Начал анализировать проиндексированные страницы сайта и обнаружил следующие моменты:
1. На сайте создан раздел - каталог с видео.. ссылка на объект (видео) имеет следующую структуру - сайт.ру/video/item/-n-/ так вот обнаружил что в поиске попадаются следующие страницы: - сайт.ру/video/item/-n-/ - сайт.ру/video/item/-n-/?to=2/
причем если есть страница с */?to=2/ - то в поиске нет нормальной с адресом сайт.ру/video/item/-n-/
не пойму откуда берется этот /?to=2/ ???
Как избавиться от этого /?to=2/ в поиске оставив только нормальную ссылку на объект?
1.1. каждый объект каталога видео имеет возможность получить код iframe для вставки его по тексту в любом другом месте, например при написании статьи - _<iframe src="http://сайт.ру/video/frame/-n-/?width=570" width="570" height="200"></iframe>
так вот в поиске присутствуют все iframe к каждой странице видео, такого вида - сайт.ру/video/frame/-n-/?width=570
Стоит ли закрыть от индекса эти страницы с iframe ?
1) Закрывается, общее правило:
User-agent: *
Disallow: */?to=2
Частное правило:
User-agent: *
Disallow: /video/item/-n-/?to=2
Можно и так и так, разница лишь в том, что первое закроет на всем сайте, второе закроет в конкретной категории.
В поиск попадает 1 из страниц, поэтому когда уберете дубль, в индексе будут правильные страницы. Появляются из-за особенности CMS.
ребята подскажите сейчас <doc id="ZD09DF5AA511FC6D5"> так начало показываться да и в xml, не вижу отличий. Помню раньше как-то очень просто можно было отделить быстроробота и спектр.. не напомните?
блин никто не знает или обсуждалось уже?
почему не стоит открывать? Может там специалисты общаются и профиль сделан очень качественно, раскрывает инфу полностью.. как в моем круге например.. будет и траф соответственно
Например на данном ресурсе профили индексируются.. ☝
bulatbulat48
По п.1. кажись разобрался - приставка /?to=2/ появляется из-за подключения связей между объектами. С этим моментом сейчас разбираюсь, с разработчиком модуля каталогов.. Почему то страницам с /?to=2/ присваивается link rel="canonical"
Тогда получается эти страницы нельзя закрывать в robots.txt? или если их закрыть - то ПС начнет индексировать нормальные адреса объектов - без /?to=2/ ???
Да индексируются и страницы самих объектов и iframe к каждой странице объектов.
Тяжело конечно вангавать)
1) Каноникал присваивается и без to=2 и с ним? какой из них канонический?
2) Покажите пример из выдачи, как проиндексировались страницы с iframe, если такие есть то возможно нужно закрыть.
---------- Добавлено 15.10.2014 в 11:07 ----------
тоже самое эти мусорные страницы так и есть в поиске, хотя сегодня очередной апдейт был 😕
1) еще раз проверьте в вебмастера, в роботс - точно ли закрыли
2) обычно 2-3 недели примерно удаляются.
http://anonymouse.org/anonwww.html
так не получится?
Скорее всего для оценки дизайна у асессоров есть какие-то, например, 3 оценки из серии
1) ужас ужас, нет цсс, синий текст на белом фоне и 3 картинки
2) народ стайл дизайн из прошлого века, что-то где-то поехало или некорректно отображается
3) современный актуальный дизайн
В третью категорию попадет, наверное, большинство сайтов из топов, поэтому эта оценка дизайна является несущественной, поэтому и есть в диалоге призив считать, что этого нет.
Например, в информ тематиках в топах могут стоять такие гхм какашки и собирать тонны трафика. Так что скорее всего эта оценка имеет какой-либо вес только для коммерса.
Тогда скорее всего попадут под тренд сайты на Аяксе :)
на мелких проектах в плюс, на большом минус.. (
похоже твиттером опять вгоняется..
Как быстро после изменения в robots.txt дубли страниц и прочий мусор пропадет из индексации яндекса? У меня уже 2 недели прошло, а в вебмастере и так индексируется папка и страницы из нее , которые я закрыл в robots ? Папка обычная в корне сайта - то есть ошибиться и написать не так ничего точно не мог
Возможно вебмастер не обновился, проверьте выдачу в ручную.
---------- Добавлено 13.10.2014 в 10:05 ----------
Добрый день!
Начал анализировать проиндексированные страницы сайта и обнаружил следующие моменты:
1. На сайте создан раздел - каталог с видео.. ссылка на объект (видео) имеет следующую структуру - сайт.ру/video/item/-n-/
так вот обнаружил что в поиске попадаются следующие страницы:
- сайт.ру/video/item/-n-/
- сайт.ру/video/item/-n-/?to=2/
причем если есть страница с */?to=2/ - то в поиске нет нормальной с адресом сайт.ру/video/item/-n-/
не пойму откуда берется этот /?to=2/ ???
Как избавиться от этого /?to=2/ в поиске оставив только нормальную ссылку на объект?
1.1. каждый объект каталога видео имеет возможность получить код iframe для вставки его по тексту в любом другом месте, например при написании статьи - _<iframe src="http://сайт.ру/video/frame/-n-/?width=570" width="570" height="200"></iframe>
так вот в поиске присутствуют все iframe к каждой странице видео, такого вида - сайт.ру/video/frame/-n-/?width=570
Стоит ли закрыть от индекса эти страницы с iframe ?
1) Закрывается, общее правило:
User-agent: *
Disallow: */?to=2
Частное правило:
User-agent: *
Disallow: /video/item/-n-/?to=2
Можно и так и так, разница лишь в том, что первое закроет на всем сайте, второе закроет в конкретной категории.
В поиск попадает 1 из страниц, поэтому когда уберете дубль, в индексе будут правильные страницы. Появляются из-за особенности CMS.
1.1 Они на данный момент индексируются?
Лучше тут обсуждать.
Вообще, чтобы узнать правильно или нет, нужно видеть URL-ы которые вы хотите закрыть. В целом ошибок не вижу.