Анализ одной вакансии

Не секрет, что Яндекс открыто публикует свои вакансии, достаточно подробно их расписывая. Их анализ может дать некую информацию по поводу того, как работает и куда движется компания. Анализ одной из них я и хочу провести.

Для начала собственно текст вакансии:

Начнем с того, что Яндекс умеет:

1) Определение тематики ... веб-сайтов и страниц

Помнится, ваш покорный слуга год назад или даже более говорил об этом. Почти никто не верил. Однако теперь можно считать свершившимся фактом. Особо обращаю внимание: не только веб-сайтов, но и страниц! Думаю именно внедрением этой технологии объясняется не столь давнее драматическое снижение тИЦ, которое все помнят. Ну а где еще она может использоваться, догадайтесь сами.

2) Отделение хороших сайтов... от спама.

Собственно об этом мы уже знаем - пресловутые автоматические фильтры и санкции. Но лишнее подтверждение, как говорится, не помешает.

3) Отделение навигационной части сайта от значимого текста.

Тоже вполне логично, т.к. навигационная часть не является контентом, а значит при расчете релевантности страницы по внутренним факторам ее можно отбросить, либо значительно понизить вес. Впрочем об этом было не трудно догадаться, да и обсуждалось это уже достаточно давно.

Но есть еще один момент. Навигационная часть сайта также является достаточно важной информацией. Как минимум она показывает основную структуру сайта, его ключевые разделы. И не думаю, что этим можно ограничиться.

Хотя на самом деле есть и еще один момент, весьма немаловажный. Но об этом умолчу, кому надо, сам догадается.

4) Извлечение фактов из текста

Не что иное, как семантический анализ. Еще 3 года назад эта технология была применена в Яндекс Новостях. И нет оснований пренебрегать возможностью доработки и использования этой технологии в основном поиске. Поле для ее применения просто громадное, а даваемые возможности можно осваивать не один год. Например, с ее помощью можно находить спамные тексты.

5) Кластеризация объектов различного типа

Формулировка достаточно размытая, поэтому пытаться высказывать какие-то предположения по этому поводу - скорее спекуляция. Единственное о чем можно говорить с уверенностью, речь идет об объектах, а не о страницах. А страницы - лишь один из типов объектов. Дальше думаем сами.

К сожалению на этом перечень раскрываемых технологий завершается. Остальное сокрыто под многозначительным "... многое другое".

Все перечисленные технологии говорят о настоящем Яндекса, но один факт - скорее о будущем: Artificial Intelligence (искусственный интеллект). Оснований подозревать, что Яндекс уже сейчас использует эти технологии - нет. А вот сам контекст в котором употреблен этот термин позволяет предположить, что Яндекс прекрасно понимает перспективу этих технологий и необходимость их использования в поисковых технологиях будущего. Напомню, что Google не так давно заявил, что ведет разработки в этом направлении. Яндекс таких заявлений не делал, но, как видим, об этом думает и уже начинает действовать.