Сайт-агрегатор (принципы работы)

netscout
На сайте с 04.08.2006
Offline
152
518

Здравствуйте !

Недавно заинтересовал вопрос создания агрегатора по продаже авиабилетов.

Только вот задача - как получать / обновлять информацию об имеющемся / проданном билете на тот или другой рейс ?

Как вообще работает механизм таких агрегаторов... Парсить смысла нет - информация крайне быстро обновляется, получается договариваться о выгрузке баз / онлайн доступ ? Или парсинг никто не отменял, просто боты будут постоянно ходить и проверять наличие билетов ? Пока никакой коммерческой выгоды не предполагается. Хочется для начала разобраться в работе таких сайтов.

Кто что думает по этому поводу ?

callidus
На сайте с 18.07.2011
Offline
334
#1

netscout, не в ту нишу вы собрались заходить. У вас нет даже малейшего представления как работают подобные системы. Гдс, апи вендоров - это малая доля того что используется подобными агрегаторами.

Надоело самостоятельно собирать семантическое ядро ( http://goo.gl/rekQL9 )? Отдай на аутсорс.
netscout
На сайте с 04.08.2006
Offline
152
#2
callidus:
netscout, не в ту нишу вы собрались заходить. У вас нет даже малейшего представления как работают подобные системы. Гдс, апи вендоров - это малая доля того что используется подобными агрегаторами.

Ну авиабилеты да, я согласен, что механизм явно сложный и трудо/время/фин затратный.

Интерес также имеется и в области агрегаторов обычных объявлений, что уверен гораздо проще реализовать даже путём парсинга (правда отслеживание ботами огромной базы каждого сайта (проверка удалённых объявлений, изменённых, отправленных в архив) тоже не самое простое занятие) и тем не менее хочется услышать мнения людей, которые сталкивались с этими вопросами. Как это всё дело изнутри работает, может почитать чего посоветуете ?

Или всё-таки тут на уровне договорённостей с администрациями о предоставлении АПИ и тд.

Спасибо !

danforth
На сайте с 18.12.2015
Offline
153
#3

Это все делается через API, с каким-то минимальным кешированием. И без договоров тут никак.

Junior Web Developer
netscout
На сайте с 04.08.2006
Offline
152
#4

понятно, спасибо !

Значит парсинг )

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий