Алгоритмы

И опять не могу не поделиться интересной находкой на ниве филологии:

Словарь омонимичных словоформ:

http://irlras-cfrl.rema.ru:8100/homoforms/index.htm

внизу есть маленькая сылочка - "скопировать", которая ведет на зип:

http://irlras-cfrl.rema.ru:8100/homoforms/download/homodic.zip

вот так.......

эх, теперь бы определиться, как все это использовать......

Вообще говоря, технологии, которые выложены на http://linguist.nm.ru/, не такие уж и коммерческие, как кажется :-)

Они доступны совершенно бесплатно - для некоммерческого, естественно, использования.

1. Литература по поиску.

Совет - идти на Amazon и покупать книжки.

Какие мои любимые не скажу, а то прочитаете

А честно, рикардо baezo-yates и компания - весьма всеобъемлюще.

2. Программ по поиску с исходниками в интернете тьма: это и FFW, MG (managing Gigabytes), Agrep, Isearch, WAIS, по-моему, даже я видел когда-то оригинльный солтоновский СМАРТ (но сейчас поискал и не нашел ). Сам я их _не_ читал - читать их, IMHO, вредно - лучше писать самому и писать "лучше". Есть и русские freeware типа mnogosearch, aspseek - тоже с исходниками.

3. Морфология и поиск вещи связанные но не одно и то же. По морфологиям я рекомендую Кимо Коскониеми (PC-KIMO) и всю ксероксо-гренобльскую линию.

Илья

P.S.

А зачем слова обязательно в числа превращать? Можно и без этого вполне обойтись.

Насколько я понял бесплатно можно взять в усеченном виде. А это все равно, что ничего....

А сама технология описана достаточно поверхностно, и на мой взгляд просто рекламма.

Не понравилось мне....

<font face="Verdana" size="2">Originally posted by iseg:
1. Литература по поиску.
Совет - идти на Amazon и покупать книжки.
Какие мои любимые не скажу, а то прочитаете
</font>

Врядтли, если честно. Не очень люблю читать по английски.

А это что такое?

<font face="Verdana" size="2">
2. Программ по поиску с исходниками в интернете тьма: это и FFW, MG (managing Gigabytes), Agrep, Isearch, WAIS, по-моему, даже я видел когда-то оригинльный солтоновский СМАРТ (но сейчас поискал и не нашел ). Сам я их _не_ читал - читать их, IMHO, вредно - лучше писать самому и писать "лучше". Есть и русские freeware типа mnogosearch, aspseek - тоже с исходниками.
</font>

посмотрел их - как то безрадостно стало... с русским у многих проблемы например (Isearch).

А что это за СМАРТ?

Ничего не нашел ... есть ли материалы в вебе?

<font face="Verdana" size="2">
А зачем слова обязательно в числа превращать? Можно и без этого вполне обойтись. </font>

Наверное считается, что так быстрее...

я тоже не хотел бы этим заниматься посредством криптографии. Проще помоему держать словарь и оттуда брать коды слов, а точне лексем.

собственно весь этот разговор и затеян был, для того чтобы узнать как это лучше делать...

В усеченном виде, т. е. без слов на буквы 'п' и 'р', можно взять просто с сайта. А полную версию можно получить тоже бесплатно, но после подписания договора о некоммерческом использовании.

Я так понимаю, что мне выпала честь общаться лично с автором? Очень приятно.....

Я на самом деле готов подписать этот договор... особенно после уточнения что же называть коммерческим использованием.

правда есть шанс, что у меня вообще не получится полученный материал использовать. Жизнь - сложная штука....

Это стемминг называется. Прямо скажем, решение не совсем удачное, но когда вообще ничего нет и в прикладной лингвистике не разбираешься, на первое время сойдет. Хотя тогда начинают возникать интересные казусы. Например, по запросу 'лес' начинает находиться 'лесби' и т.д. (вон Keva хорошо знает, это его любимый запрос )

А вообще собрать морфологию просто так, на ровном месте, очень трудно, даже если ты семи пядей во лбу - там одних только морфологических таблиц должно быть не менее 700 и взять их можно только у лингвистов или пытаться как-то синтезировать из подручных средств.

Хотя мне, в принципе, уже удалось создать довольно работоспособный

морфологический анализатор для существительных и прилагательных, который, правда, учитывает пока не все аспекты русского языка.

В общем, морфология - это куча хлопот и времени, так что если ее предлагают почти бесплатно, берите

Это фатально.

Материалы в вебе очень помогают найти поисковые системы.

Спешу вас огорчить, что это делать незачем. Так что весь разговор вполне бесмыссленен.

Илья

<font face="Verdana" size="2">Originally posted by iseg:
Спешу вас огорчить, что это делать незачем. Так что весь разговор вполне бесмыссленен.
Илья</font>

Ну поче му же? Познание нового и получение информации вещь вполне наполненная смыслом. Если бы вы так не считали, не тратили бы время на этот форум. и на другие тоже.

А насчет английского - это вполне понятно, учитывая, что мой родной язык русскмй и на данный момент информации на русском вполне достаточно

Тем более, что 1 из аспектов данного вопроса касается русского языка (морфология).