TopperHarley: Два варианта решения: Первый вариант(спасибо,kashim) - "разбивать архив на части". Проблем с распаковкой не будет так как не будет 200мг архива, а будет 10 штук по 20мг....
А разве аглоритм MultiLoader не такой (дор на 200 мб):
Заливаем по фтп 10 файлов по 20 мб, собираем на хостинге скриптом из частей файл на 200 мб (вроде скрипт называет его «r.zip»), разархивируем уже его. ?
То есть все равно нагрузку дает финальный большой архив.
kashim: Advice, честно говоря, никак не могу понять твоей проблемы. Для распаковки архивов любых размеров, в пандоре есть функция "разбивать архив на части", после этого стандартный менеджер льет не один безумный архив на 200МБ, к примеру, а сотню двухмегабайтных, которы распаковываются в один дор. Ты используешь эту опцию или нет?
Да. Но он вроде хочет потом всю пачку залить одним архивом и поставить 1 раз на распаковку вручную. Просто ему попался хостинг, где иерархия папок разрешает такое делать, но в большинстве случаев иерархия несовместима с таким методом (типа папка сайта в /site.ru//htdocs/www/ и т.д.), так что никто перерабатывать заливщик не будет. Вон Топпер посоветовал сторонние решения. Пусть копает в эту сторону.
Advice: TopperHarley, приветствую, на 4й странице этой темы интересовался по поводу того, как за столько времени в Пандоре не ввели функцию запаковки всех доров в один архив и заливки архива на фтп, потом мне напомнили про встроенный UploadManager, протестировал его, но он больше подходит для фрих, для своего хостинга он не подошел.
Проблема в том, что он пытается распаковать архив, архив большой, в итоге пока хостинг пытается его распаковать, он опять обращается к скрипту распаковки якобы из-за превышения таймаута предыдущего запроса, а хостинг в это время всё еще распаковывает архив, в итоге данное решение не подходит.
Можно ли будет добавить в Пандоре запаковку пакетки доров в 1 архив(zip) и заливку архива на фтп(без распаковки)?
Какие размеры архива? Может просто то у Вас уж больно говнохостинг, и его следует сменить? Лью через MultiLoader архивы по 200 мбайт на несколько разных шаред-хостингов (по 300-700 рублей) и норм.
Если планируете распаковывать через файловый менеджер хостера ручками, то тогда и архивируйте вручную, все-равно рутина…
atech: нечего сказать пройди мимо, нет мля нужно себе или хрен его знает кому доказать какой я умный и у меня больше 25см🙅 интересует сервис либо альтернатива RDS Api для проверки 1К и более доменов на индекс в гугле
Для себя ничего такого не нашел. Сделал в ZennoPoster шаблон на Get-запросах:
При встрече капчи тупо меняет прокси. Все данные обрабатываются внутри 1 документа *.xlsx . Так что есть возможность просматривать историю, сдвигая столбец результатов при парсинге вправо. Идею подал, пробуйте реализовать под свои нужды.
Get-запросами в Zennoposter без эмуляции браузера в 200 потоков так и не словил капчи за час. Тоже не вижу смысла в API. Правда парсил релевантные страницы в пределах сайта а не обычную выдачу.
Перевод первого символа в строке к верхнему регистру регулярками:
^(.)
Заменить на:
\U\1
или если к нижнему регистру, то заменить на:
\L\1
Работает в Notepad++, но только с латиницей. Рекомендую на торентах найти редактор EmEditor, - в нем нормально и кириллицу такая формула обрабатывает. И на больших файлах он в несколько раз быстрее обрабатывает регулярки.
как можно отличить ботов от реальніх посетителей, а то терзают меня смутніе сомненья☝
TDS показывает IP\реферер\User Agent . По этим трем параметрам можно запалить признаки бота. Ну и плюс своя (либо от TDS) база ботов обновляемая.
отдельно, дабы из привычно замусоренных тем не отбирать нужную инфу, всё под контроел, не нужно нервничать...
Отдельно будете на своем форуме в выведенном разделе, а здесь не надо засирать страницу.
Основные компоненты можно взять у конкурентов, а уже когда будет готовый продукт, то Вам подскажут что надо доделать.
Можно добавить еще в плагины VESTAAddDomain.dll ? Это самая популярная панелька для дорвейщиков среди бесплатных.
API: https://vestacp.com/docs/api/#add_domain
Два варианта решения:
Первый вариант(спасибо,kashim) - "разбивать архив на части". Проблем с распаковкой не будет так как не будет 200мг архива, а будет 10 штук по 20мг....
А разве аглоритм MultiLoader не такой (дор на 200 мб):
Заливаем по фтп 10 файлов по 20 мб, собираем на хостинге скриптом из частей файл на 200 мб (вроде скрипт называет его «r.zip»), разархивируем уже его. ?
То есть все равно нагрузку дает финальный большой архив.
Advice, честно говоря, никак не могу понять твоей проблемы. Для распаковки архивов любых размеров, в пандоре есть функция "разбивать архив на части", после этого стандартный менеджер льет не один безумный архив на 200МБ, к примеру, а сотню двухмегабайтных, которы распаковываются в один дор. Ты используешь эту опцию или нет?
Да. Но он вроде хочет потом всю пачку залить одним архивом и поставить 1 раз на распаковку вручную. Просто ему попался хостинг, где иерархия папок разрешает такое делать, но в большинстве случаев иерархия несовместима с таким методом (типа папка сайта в /site.ru//htdocs/www/ и т.д.), так что никто перерабатывать заливщик не будет. Вон Топпер посоветовал сторонние решения. Пусть копает в эту сторону.
TopperHarley, приветствую, на 4й странице этой темы интересовался по поводу того, как за столько времени в Пандоре не ввели функцию запаковки всех доров в один архив и заливки архива на фтп, потом мне напомнили про встроенный UploadManager, протестировал его, но он больше подходит для фрих, для своего хостинга он не подошел.
Проблема в том, что он пытается распаковать архив, архив большой, в итоге пока хостинг пытается его распаковать, он опять обращается к скрипту распаковки якобы из-за превышения таймаута предыдущего запроса, а хостинг в это время всё еще распаковывает архив, в итоге данное решение не подходит.
Можно ли будет добавить в Пандоре запаковку пакетки доров в 1 архив(zip) и заливку архива на фтп(без распаковки)?
Какие размеры архива? Может просто то у Вас уж больно говнохостинг, и его следует сменить? Лью через MultiLoader архивы по 200 мбайт на несколько разных шаред-хостингов (по 300-700 рублей) и норм.
Если планируете распаковывать через файловый менеджер хостера ручками, то тогда и архивируйте вручную, все-равно рутина…
нечего сказать пройди мимо, нет мля нужно себе или хрен его знает кому доказать какой я умный и у меня больше 25см🙅
интересует сервис либо альтернатива RDS Api для проверки 1К и более доменов на индекс в гугле
Для себя ничего такого не нашел. Сделал в ZennoPoster шаблон на Get-запросах:
При встрече капчи тупо меняет прокси. Все данные обрабатываются внутри 1 документа *.xlsx . Так что есть возможность просматривать историю, сдвигая столбец результатов при парсинге вправо. Идею подал, пробуйте реализовать под свои нужды.
Get-запросами в Zennoposter без эмуляции браузера в 200 потоков так и не словил капчи за час. Тоже не вижу смысла в API. Правда парсил релевантные страницы в пределах сайта а не обычную выдачу.
Есть ли бесплатный удобный софт, который разобьёт текстовку по 1 предложению в 1 строку?
RegexFilter от allknower
Перевод первого символа в строке к верхнему регистру регулярками:
Заменить на:
или если к нижнему регистру, то заменить на:
Работает в Notepad++, но только с латиницей. Рекомендую на торентах найти редактор EmEditor, - в нем нормально и кириллицу такая формула обрабатывает. И на больших файлах он в несколько раз быстрее обрабатывает регулярки.