vob2014, я вообще не претендую на создание бизнеса на продаже движка )) это так, мелочи на пиво, в сравнении с реальным доходом получаемым от дорвеев. Продажи скрипта - это только для поиска идей и новые направления мыслей. А скрипт я в первую очередь делаю и поддерживаю для себя. Ваши предложения с многоступенчатым парсингом считаю бесполезным и усложнением всей идеи простого скрипта.
вдс 5 басовый у itldc или диджиталоушена выдерживает сотни тысяч запросов в сутки. а когда большинство контента закешируется - так вообще нагрузка падает до нуля.---------- Добавлено 09.03.2015 в 21:21 ----------vob2014, и шаред хостинги не у всех такие унылые. купивших скрипт много, но мало кто жаловался что не успевает сгенериться. Видел уже кучу доров, которые отлично живут и хостинги позволяют скрипту работать эти 1,5 минуты.
у яндекса фильтр для быстробота по тематикам есть: маты, адалт, прочие нарушающие законодательства...
webstat - это скрипт статистики, а не "какая-то линкопомойка" :D сочувствую сеошникам с таким клиентом.
vob2014, VDS - вот что сейчас не проблема, всего от 5$ (что часто дешевле шареда, т.к. 5$ - это гигов от 15 диск дается). и никаких лимитов на memory_limit и max_execution_time, а разбитие процессов парсинга на шаги - это сильно много работы на переписывание и тестирование скрипта, которая мне не нужна и не интересна при текущей символической стоимости скрипта.
ну и такое разбиение - это сильно отрицательно на индексации по идее скажется, т.к. сначала бот зайдет и увидит только перелинковку и пустую (без контента) страницу, которая не будет иметь никакой внутренней оптимизации, а значит ей и трафа не видать, а второй раз он может зайти через месяц, когда дор в бане будет.
vob2014, демо дор на новом домене:
http://new.mytestdor.cf/%D0%BF%D1%83%D1%82%D0%B8%D0%BD+%D0%B6%D0%B5%D0%BD%D0%B8%D0%BB%D1%81%D1%8F+%D0%B2%D1%82%D0%BE%D1%80%D0%BE%D0%B9+%D1%80%D0%B0%D0%B7+2014+%D1%84%D0%BE%D1%82%D0%BE/ картинки ест. на mytestdor.cf старая версия скрипта.
По памяти - я не в курсе какая там память на шаредах сейчас, не юзаю их очень много лет. Просто предупредил о возможных проблемах.
30 секунд мало, при контенте из снипетов - хватит, при расширенном парсинге контента не хватит точно и страница не сможет сгенериться.
индексирует.
🍿 вы лично физически наблюдали там облако? Я видел только красивую админку, а облако там или не облако из нескольких машин и поломалось ли оно у них или им просто надоело - я не видел например.
Да доргенов с кучей макросов полно. Недавно решил что вдруг мои наработки не так круты как у других, пробовал sed (макросов, понтов, сложностей, стоимость - все космос), взорвал моск настройкой сервера, запилил доров, погонял их спамилками и кросспостингами, пришел гугл и бинг бот, мунин показал что сервер ща помрет, в общем 3 недели сервер помирал, трафа нацедилось не больше чем от моего движка в 3 макроса. Отформатировал все, залил свои скрипты, нагрузка на сервер около нуля, трафа не хуже, без понтов ,но все работает, количество макросов не показатель )---------- Добавлено 08.03.2015 в 20:15 ----------
🍿 все мы чето скрываем, если это чето дает бабло.
🤪 каждый день делать по новому "макросу"? но тогда и стоимость будет: количество макросов * 2 = стоимость в $ . такое устроит? 🍿
это фишка движка. никаких макросов, никаких ключевиков, ничего лишнего в общем :)
http://foxi.biz/snizaem-nagruzku-na-server-na-90-protentov.html мой список.
дальше уже свои логи смотреть и добавлять новых.
