В кулуарах Киб Риф: сотрудник Яндекса об оптимизаторах

buddha
На сайте с 06.03.2010
Offline
38
#121
Джо Саратини:
для всех сайтов посещаемость учтена быть не может.

скажут что наличие метрики теперь еще один положительный фактор, потому что белому вебмастеру-оптимизатору нечего скрывать от яндекса, через месяц уже у половины будет стоять😂

6иопсихо3 в контакте (http://vkontakte.ru/biopsychosis) | Домены Михи Кузьмина (http://awhois.ru/domains/mails/mihakuzmin@gmail.com/descending/domains/)
[Удален]
#122

Внесу свою копейку в обсуждение, вряд ли матрикс-нет является обычным алгоритмом, таким как его все понимают, ключевое слово - "самообучение", оно не раз было произнесено и на него не обращают внимание, а зря, вот цитата из википедии которая почти в полной мере характеризует алгоритм Яндекса:

Иску́сственные нейро́нные се́ти (ИНС) — математические модели, а также их программные или аппаратные реализации, построенные по принципу организации и функционирования биологических нейронных сетей — сетей нервных клеток живого организма. Это понятие возникло при изучении процессов, протекающих в мозге, и при попытке смоделировать эти процессы. Первой такой попыткой были нейронные сети Маккалока и Питтса [1]. Впоследствии, после разработки алгоритмов обучения, получаемые модели стали использовать в практических целях: в задачах прогнозирования, для распознавания образов, в задачах управления и др.

на закуску:

Нейронные сети не программируются в привычном смысле этого слова, они обучаются. Возможность обучения — одно из главных преимуществ нейронных сетей перед традиционными алгоритмами. Технически обучение заключается в нахождении коэффициентов связей между нейронами. В процессе обучения нейронная сеть способна выявлять сложные зависимости между входными данными и выходными, а также выполнять обобщение. Это значит, что в случае успешного обучения сеть сможет вернуть верный результат на основании данных, которые отсутствовали в обучающей выборке, а также неполных и/или «зашумленных», частично искаженных данных.

красным выделено мной.

Иначе говоря, после определенного времени обучения программеры не знают что там внутри происходит. Я думаю что система ИНС Яндексом, как минимум частично, используется. Отсюда попытки вскрыть в полной мере "черный ящик" бесполезны в принципе.

Ну искажают данные и "шумят" - оптимизаторы.

Обратите внимание насколько элегантное решение!

Вполне в духе отечественной инженерной школы, это круче чем гугл.

юни
На сайте с 01.11.2005
Offline
901
#123
Sandalia:
малое количество поисковых машин (судя по их днс-именам - их не более 100 штук), и соответственно очень медленное добавление в индекс.

Между посещением робота и добавлением в индекс есть немало промежуточных стадий. И судя потому, что

Lisa:
Кого Яндексу надо - тех он добавляет быстро

основная задержка происходит на этапе оценки собранного контента.

https://a-parser.com/ - парсер для профессионалов SEO, маркетологов, арбитражников и SaaS, https://searchengines.guru/ru/forum/944108 - прокси-сервис на базе операторов домашнего интернета, сотни тысяч IP-адресов, канал от 20 Мбит
wolf
На сайте с 13.03.2001
Offline
1183
#124

Zlyden, а при чем тут нейронные сети? В Яндексе используется жадный алгоритм boosting.

Сергей Людкевич, независимый консультант, SEO-аудиты и консультации - повышаю экспертность SEO-команд и специалистов ( http://www.ludkiewicz.ru/p/blog-page_2.html ) SEO-блог - делюсь пониманием некоторых моментов поискового продвижения ( http://www.ludkiewicz.ru/ )
Джо Саратини
На сайте с 30.10.2009
Offline
196
#125
Zlyden:
Иначе говоря, после определенного времени обучения программеры не знают что там внутри происходит. Я думаю что система ИНС Яндексом, как минимум частично, используется. Отсюда попытки вскрыть в полной мере "черный ящик" бесполезны в принципе.
Ну искажают данные и "шумят" - оптимизаторы.

Очень интересная тема. Про ИНС я не знал раньше, но были догадки, что в алгоритме того же АГС есть некая случайная составляющая, своего рода "генератор чисел". Именно работой этого "генератора" и обусловлены необоснованные вылеты сайтов. Теперь можно более подробно представить суть этой системы.

Zlyden, + 100 :)

wolf:
В Яндексе используется жадный алгоритм boosting.

Пускай так, но ведь элементы самообучения присутствуют в нем ?

http://www.machinelearning.ru/wiki/index.php?title=%D0%90%D0%BB%D0%B3%D0%BE%D1%80%D0%B8%D1%82%D0%BC_AdaBoost

"Является мета-алгоритмом, в процессе обучения строит композицию из базовых алгоритмов обучения для улучшения их эффективности"

[Гори в аду, Карл ! (http://neprimirim.net/idi-naxuj-karl.php)] [Последняя резиденция королей (http://proza.ru/2017/02/16/2175)] [Продолжение рассказа В.Цоя "Романс" (http://neprimirim.net/romans-viktora-tsoya-prodolzhenie.php)]
[Удален]
#126
wolf:
Zlyden, а при чем тут нейронные сети? В Яндексе используется жадный алгоритм boosting.

Сергей, (тезка, кстати:) ), в чем революционность Снежинска тогда? При эволюционном развитии алгоритма даже при его существенном усложнении, теоретически, оптимизаторы по прежнему должны бы были мочь существенно влиять на выдачу, но, произошло нечто другое, факторы перестали оказывать существенное влияние так как раньше. И, при этом, заявлено о революционности алгоритма. Вот я делаю такой вывод, что ВОЗМОЖНО, ЧАСТИЧНО были введены принципиально новые алгоритмы для увеличения коэффициента сигнал/шум, наиболее вероятный кандидат - нейронные сети. Это только мое видение не претендующее на истину.

Если бы я руководил отделом программирования Яндекса, то несколько человек обязательно уже давно работали бы в направлении ИНС. Тема то давняя и известная, имеющая прекрасные практические применения.

wolf
На сайте с 13.03.2001
Offline
1183
#127
Джо Саратини:
Пускай так, но ведь элементы самообучения присутствуют в нем ?

Там присутствует обучение.

Dynamix
На сайте с 04.05.2007
Offline
155
#128

понты это все, существующий матрикснет впору как раз сравнивать с туземцами. Огромное количество ГС в индексе лишний раз доказывает что это элегантное решение - понты. как оптика CarlZeiss в телефонах нокиа

wolf
На сайте с 13.03.2001
Offline
1183
#129
Zlyden:
Сергей, (тезка, кстати ), в чем революционность Снежинска тогда?

Перешли с метода опорных векторов на жадный алгоритм. Мало? :)

[Удален]
#130
wolf:
Перешли с метода опорных векторов на жадный алгоритм. Мало? :)

Мало, если есть более прогрессивные методы.

Я просто высказал свое мнение.

Не удивлюсь если ИНС в недрах Яндекса обкатывается.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий