Как определить непод фильтр?

12
Каширин
На сайте с 03.01.2004
Offline
1018
#11
Webit:
Ну а ежели анкор популярный то проверяем всю выдачу ручками(можно скриптом если есть) на предмет дубля. Как первый дубль находим то усе - неуникальный:)

Так хорошо только в теории рассуждать. А на практике: кликаете на первую ссылку - страница не доступна. Кликаете на вторую, а там нет ссылки, убрали 20 минут назад. Ваш парсер вам показывает, что ссылка уникальна, а на самом деле Яндекс знает точно таких 3 (три) штуки.

Вы конечно можете парсить сохраненные копии :) Только делать это вы будете крайне недолго ;)

Это в теории все легко. Или на 100 страницах. А когда хотя бы 1000 проверите - поймете, что все очень и очень непросто.

Webit
На сайте с 13.12.2006
Offline
240
#12
Каширин:
Так хорошо только в теории рассуждать. А на практике: кликаете на первую ссылку - страница не доступна. Кликаете на вторую, а там нет ссылки, убрали 20 минут назад. Ваш парсер вам показывает, что ссылка уникальна, а на самом деле Яндекс знает точно таких 3 (три) штуки.

Вы конечно можете парсить сохраненные копии :) Только делать это вы будете крайне недолго ;)

Это в теории все легко. Или на 100 страницах. А когда хотя бы 1000 проверите - поймете, что все очень и очень непросто.

Понимаю, поэтому так и не делаю:) Это просто один из способов.

Можно еще бэки по яхе выдрать и проверить скриптом каждую ссылку на индексацию в Яндексе ну и анкоры посмотреть.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий