Наблюдения за индексацией статей

speedre13 · 2008-03-10T15:35:47.0000000Z

Вот. Решил в этом году выбраться в люди :) Хочу привести свои наблюдения по поводу индексации статей Яндексом. Итак, вообще за все время сложилось впечатление, что Яндекс не умеет различать копии контента, хотя давайте по порядку. Я проводил, что-то вроде исследований на нахождение статей разных тематик и в разных поисковиках (ну сейчас говорю про Яндекс) и для себя выяснил, что "найти" идентичные статьи в интернете (иногда даже те, которые на 100% скопированы) поисковая система практически не может и дело даже не в том есть такие технологии или нет, а в том на каком сайте и где размещена статья! Поисковики не умеют выделять столбцы где написана сама статья. Пауки читают все подряд и в индекс попадает не только статья, но и другое содержимое сайта такие как 1) навигация 2) новости 3) другое. Всё мною перечисленное убивает 10-20% неуникальности статей. Далее в дело включается поисковая система. Она видит, что некоторые части статьи совпадают с теми что есть в индексе. Ну и пусть, главное что не на .... 70%. Это лично моё сложившееся мнение про "неуникальность". Здесь главное 1) сменить заголовок статьи (полностью) 2) изменить самый 1 абзац статьи или же первые 200 знаков или 10% от количества символов в статье, но не меньше 200. Почему именно так. По ходу изучения свойств индексации Яндекса я для себя решил, что его возможности по сканированию ВСЕГО интернета ограничены. Да он старается вобрать в себя весь контент сети, однако, когда речь заходит о дублировании он (как я лично думаю) сканит первые 1000-1500 символов и все. Иначе бы его сервер (как опять же думаю я) вскипел бы :idea:. Слишком много инфы и по 1 000 000 раз её нужно прогнать туда-сюда. Не в тему конечно но что касается Google - то же самое, однако лично я считаю, что он сканит до 1000 символов (от 500-1000). Критики .... прошу сюда, только сильно меня не бейте. :D:

114

speedre13

11 марта 2008, 15:52

#21

Tmp:
серьезный инсайд :D

Это не инсайд, а мои личные наблюдения, которые я 1,5 года на своем опыте почувствовал.

Смысл этой темы в том, что мне хотелось бы узнать и ваше мнение, а то я уже давно на форуме не был, а как известно в споре рождается истина.

75

Редько Владимир

11 марта 2008, 16:31

#22

в маил.ру существует программа, которая позволяет найти дубликаты. выборка - до 70% от копискайпа. не заметил в работе программы каких либо тормозов. значит - работает.

93

TimeBomb

11 марта 2008, 17:29

#23

Редько Владимир, можно ссылочку?

speedre13, опыт - опытом, споры - спорами, математика не признает ни слова "приблизительно", ни слова "имхо", а истина известна только работникам Яндекса.

75

Редько Владимир

12 марта 2008, 02:01

#24

ошибочка, это разработка TextBroker.ru

http://textbroker.ru/main/dcfinder.html

114

speedre13

12 марта 2008, 15:36

#25

Спасибо за ссылку. Поможет в дальнейших исследованиях.

Курс биткоина превысил $50 тысяч

Маркетинг для шоколадной фабрики. На 34% выше средний чек