php.developer, а по phantomjs есть какая нибудь библиотека на php или только надо писать на javascript?
Если кто-то сможет подсказать как формируются id ссылок типа https://novostroykirf.ru/1/#!joinsearch nref=4223578001 для перехода в карточку, буду очень благодарен. Этого уже в ответе DtoAction найти не могу((
Да, какая то фигня получается. Данные исходные есть в ответе, а id для перехода по ссылке там где Имя ЖК и отправки следующего запроса нет там. Откуда его брать?
уже разобрался, данные приходят там, как то в первый раз недоглядел...
а датаколы и т.д. обрабатывают js нормально?
угу, скрипт написан)
Нужно было для парсинга данных с сайта. Имелся пул id и в зависимости от этого id нужно было отправить около 50 POST запросов которые нужно было выполнить сразу для записи данных в файл. Отправку POST сделал мультикурлом, но из за того, что id много все это хотелось бы сделать быстрее. Подключил библиотеку pthreads и сделал в 10 потоков, что ускорило процесс. Беру пачку id и отправляю для них кучу POST запросов параллельно.
Не найдете вы такого чтоб прям все из коробки было. Все равно придется допиливать. Адаптивный дизайн может быть на каждом движке, все зависит от верстки шаблона, статистика продаж и события - это проще оценивать с помощью уже имеющихся метрики и гугл аналитики и т.д. Формы, лендинги - все подстраивается индивидуально в зависимости от требований. Берите бесплатный движок типа wordpress или modx и допиливайте его под свои нужды. Либо готовьте подробное ТЗ и ищите исполнителей. Все равно без работы программистов вам не обойтись.
Для ознакомления что это такое и с чем его едят можете попробовать [Empo] Курc по контекстной рекламе Google Adwords и Яндекс Директ (Продвинутый-2016).
Посмотрите станет понятен принцип работы с контекстом. Ну а дальше только практика и опыт, может кейсы какие найдете еще.
в 10-20 потоков идет нормально, иногда пустые страницы возвращаются. Обрабатываю рекурсивно остатки, все ок. Но хотелось бы одновременно. Может быть таймаут как-то можно поставить дополнительно, чтоб все страницы скачивались? Каждый раз разное количество скачивается, он банит по какому-то умному алгоритму?
если про PHP, то вы правы, там есть функциональный стиль программирования и объектно-ориентированный
на скорость работы движка не влияет тип программирования, влияют способы реализации того или иного функционала, алгоритма. ООП просто гораздо удобнее и универсально при разработке крупных проектов.
А движков, реализованных без использования ООП вы уже не найдете, наверное.
