SEDv4 «MobyDick» - ваши вопросы, наши ответы, рассказ о системе

X
На сайте с 08.02.2010
Offline
55
#71
DEM333:

что до скрипта - его у меня нет. вы напрасно переживаете так.
сразу заметил не что кодит не гик. код плоский, академиный без креатива, такая себе жертва масштабируемости.
по архитектуре незачет) все это могло работать в разы быстрее.

Тогда непонятно )

D3
На сайте с 08.02.2009
Offline
55
#72

ну ты же знаешь - хороший понт... но забывать об этике все равно не стоит)) спокойной ночи.

X
На сайте с 08.02.2010
Offline
55
#73

DEM333,

Т.е. ты не видев код сделал выводы, которые можно сделать только посмотрев в код ? ))) Ради понта? Объясни, я совсем запутался.

vladosik
На сайте с 04.08.2011
Offline
54
#74

Учитывая то, что тут используется symphony, то если код писал не реальный перец, то все будет выглядеть как псевдо код или как в старинке говнокод.

Касаемо ioncube, в 95% расшифровка происходит без искажений за пару минут, однако эти искажения можно подправить пронализировав код.

Теперь касаемо самого SED.

Сколько занимает парсинг страницы и, соответственно, вывод пользователю, если используются парсеры все сразу и все выводится - Youtube, Ask, Aol.

Для какой цели используется некий Sedcacher? Неужели без него никак не обойтись?

X
На сайте с 08.02.2010
Offline
55
#75
vladosik:
Учитывая то, что тут используется symphony, то если код писал не реальный перец, то все будет выглядеть как псевдо код или как в старинке говнокод.

Умоляю продолжайте!

sedcacher вышел из недр комьюнити как дополнительная утилита. для работы sed не нужна - утилита.

vladosik
На сайте с 04.08.2011
Offline
54
#76
Умоляю продолжайте!

А вы не согласны?

Что насчет остальных вопросов? + Есть ли блоки с динамическим контентом?

L!mur
На сайте с 26.06.2006
Offline
176
#77
vladosik:

Теперь касаемо самого SED.
Сколько занимает парсинг страницы и, соответственно, вывод пользователю, если используются парсеры все сразу и все выводится - Youtube, Ask, Aol.

Парсеры написаны с помощью XPath, что сводит время парсинга страницы практически к 0, время работы парсеров = время загрузки страницы с ПС

Время отдачи страницы пользователю зависит от сервера и его настроек, а также от того, была ли эта страница уже создана до этого и закеширована (сразу забирается из кеша) или это первое посещение страницы (происходит весь процесс: парсинг, генерация)

vladosik:
Для какой цели используется некий Sedcacher? Неужели без него никак не обойтись?

Используется некоторыми пользователями для обхода страниц созданных на SEDv3 дорвеев, для того, чтобы закешировать их в статику.

Использование этой программы не обязательно, за вас все могут сделать поисковые роботы, которые будут обходить страницы, как это делает кешер, вызывать их генерацию и помещение в кеш.

Если Вам интересен остальной функционал, он очень подробно, на 99% описан в http://wiki.sedv4.ru (как происходит парсинг, кеширование, как работают парсеры и так далее)

vladosik огромная просьба не строить теории на тему того, как выглядит код SEDv4, у кого какие руки. Вы кода не видели и выстраивать какие-то предположения бессмысленно.

если код писал не реальный перец

Если бы да кабы...

10'000 руб/сутки на SEDv4 «MobyDick»! (/ru/forum/comment/12653555) Нужен трафик? Купи «SED» (http://www.sedv4.ru) 5'000 руб/сутки на SEDv3 (/ru/forum/comment/11641425) Для работы с Twitter только TwiFarmv3! (/ru/forum/839117)
X
На сайте с 08.02.2010
Offline
55
#78
Сколько занимает парсинг страницы и, соответственно, вывод пользователю, если используются парсеры все сразу и все выводится - Youtube, Ask, Aol.

забыл. Логично же - тут все зависит от того где находится сервер с которого просиходит парсинг. Сама сборка страницы из кеша не занимает много времени

если у вас сервер в Монголии подключен по диалапу и вы с него парсите ВСЕМИ парсерами (что в принципе не имеет смысла, так как для наполнения страницы контентом достаточно 2-3 парсера одного вида) то наверное это будет очень долго. Средняя загрузка закешированой страницы не превышает полусекунды в большинстве случаев.

---------- Добавлено 11.07.2013 в 11:35 ----------

vladosik:
А вы не согласны?

Не согласен с чем ? что на symFony не плоский не псевдо код (что это за термины вообще?) могут писать только реальные перцы (?) или что вы реальный перец? ))

---------- Добавлено 11.07.2013 в 11:41 ----------

Псевдокод

Не уверен что на symfony это возможно. Может быть с 3 версии не для гиков будет специальный эдишн

vladosik
На сайте с 04.08.2011
Offline
54
#79

Примерное время вы можете сказать, если сервер находится в Нидерландах, парсятся и выводятся сразу 3 поисковика - Youtube, Ask, Aol. Или даже у вас с какой скоростью грузится страница с примерно такой же конфигурацией парсеров.

xordeer, я не профессиональный программист и в своей жизни таких встречал всего пару раз на dev conf и обычно в онлайне вижу на stackowerflow. Я спрашивал про то, что если человек типа "программист", то код на symphony будет выглядеть как говнокод.

Да и не вижу я смысла хамить мне за обычное разъяснение что да как человеку, который что то писал про качество кода на предыдущей странице. Если вам все таки хочется поспорить, то аргументируйте, а не "Если бы да кабы...".

Кто-то подумает: "Наверное ЧСВ немного завышено у вас" :)

И ведь действительно все так и есть... и даже не немного...

L!mur
На сайте с 26.06.2006
Offline
176
#80

vladosik Вас никто не хотел обидеть. Вы, не профессиональный программист, не видели кода, приходите в топик и начинаете выстраивать теорию, высказывать предположения, что было-бы, если бы.

Какова цель?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий