«Метод шинглов» или «Как выбрать уникальные тексты из кучи»

Dobrodoov
На сайте с 22.11.2007
Offline
115
621

Привет, подскажите как из кучи сгенерированного для проектов под Allsubmitter выбрать наиболее уникальные? Есть более 60 000 текстов, нужно из них отобрать наиболее уникальные (менее 20% схожести)

Спасибо за ответы.

R
На сайте с 20.08.2007
Offline
139
#1

привет, может я не понял о чем ты, но в генерации значений в оллсабе, в результатах есть кнопочка очистить. Она отбирает уникальные

Dobrodoov
На сайте с 22.11.2007
Offline
115
#2

Rchernovol, да, это я видел, но я не понял как им обращаться. Что писать в раздел размер шингла в словах? Экспериментировал, но так ничего и не понял.

R
На сайте с 20.08.2007
Offline
139
#3
Dobrodoov:
Что писать в раздел размер шингла в словах? Экспериментировал, но так ничего и не понял.

А не знаю я теории. На практике - ставлю процент схожести 20%, и 5-8 слов в размере шингла.

Dobrodoov
На сайте с 22.11.2007
Offline
115
#4

А есть ли какой-то отдельный софт? Кто чем и как пользуется?

Linkpusher
На сайте с 28.12.2007
Offline
176
#5
Rchernovol:
А не знаю я теории.

http://blog.arseo.ru/shingly/ вместе со ссылками.

Точу ножи. Буквально. Есть отзывы. Заказать заточку в МСК и Подольске можно через Телеграмм.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий