X-Software: Обновления!Penguin обновлен до версии 4.5. Внесены следующие изменения:
Добавлена возможность разбивки файлов на части. Теперь можно разбивать файлы по количеству строк, размеру файла или задавать требуемое количество файлов.
Что-то ни фига не разбивает, при нажатии на кнопку "Разбить" вылетает сообщение "Вы не указали количество строк!", где бы не стоял радиобатон. Естественно инпут с количеством строк заполнен.
Mozilla/5.0 (Windows; U; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 2.0.50727)
Mozilla/5.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 2.0.50727)
Mozilla/5.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4325)
Mozilla/5.0 (compatible; MSIE 6.0; Windows NT 5.1)
Mozilla/45.0 (compatible; MSIE 6.0; Windows NT 5.1)
Mozilla/4.08 (compatible; MSIE 6.0; Windows NT 5.1)
Mozilla/4.01 (compatible; MSIE 6.0; Windows NT 5.1)
Mozilla/4.0 (X11; MSIE 6.0; i686; .NET CLR 1.1.4322; .NET CLR 2.0.50727; FDM)
Mozilla/4.0 (Windows; MSIE 6.0; Windows NT 6.0)
Mozilla/4.0 (Windows; MSIE 6.0; Windows NT 5.2)
Mozilla/4.0 (Windows; MSIE 6.0; Windows NT 5.0)
TopperHarley: В 2х словах: автоматически средствами .net фреймворка и ОС.
Средств управлять ими на низком уровне в .net нет и слава богу.
Все что делается из кода - это создание потоков и управление афинити маской.
Реализация фреймворка уже занимается распределением нагрузки от этих потоков на процы/ядра.
Так что хз. Если ты сильно по этой теме заморачиваешься, то тут нужен только c++ дорген, думаю с уровня c++ можно все что угодно провернуть.
А кол-во потоков выбираешь ты? Или тоже .net регулирует? Потому как я наблюдал вроде порядка 21, при этом свободные ресурсы ещё оставались.
Вот лог генерации. В скобках указал сколько ключей в дорах. Кроме пандоры на компе ничего нет(винда недавно установленная комп пустой). Комп ни кто не использовал во время генерации. По логу видно, что в начале генерации пакетки, времени на один дор уходило меньше чем в под конец.
И ещё вопрос про многопоточность, не обращал внимания на intel, но вот на амд пронаблюдал. Странно как-то распределяется нагрузка на разные ядра. Иногда бывает так, что одно ядро 80-100%, а есть ядра на которых 0-1%. Как-то не равномерно распределяется. Если нужно, наделаю скринов загрузки оперативки, цп, жеского на intel и амд как будет время.
Тюнинг параметр: //Список внешних файлов шаблона, в которых выполняется обработка //ExtTemplateFiles=.htm,.html,.js,.css,.php,.htaccess
Попробуй вписать так: ExtTemplateFiles=.js И тогда уже все-таки включить опцию "и обрабатывать макросы.."
Не совсем то, у меня почему-то коцается файл jquery.min(оригинальный в нём ничего не правил), причём не всегда, на одних сайтах он коцается на других нет.
Требования одни быстрый загон в индекс гугла и яши.
Тебе обязательно на первую позицию? Или 3-4 тоже подойдут?
Обновления! Penguin обновлен до версии 4.5. Внесены следующие изменения:
Что-то ни фига не разбивает, при нажатии на кнопку "Разбить" вылетает сообщение "Вы не указали количество строк!", где бы не стоял радиобатон. Естественно инпут с количеством строк заполнен.
Какой User-Agent лучше использовать?
Вот с этими парсь. Не банит вообще.
Mozilla/5.0 (Windows; U; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 2.0.50727)
Mozilla/5.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 2.0.50727)
Mozilla/5.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4325)
Mozilla/5.0 (compatible; MSIE 6.0; Windows NT 5.1)
Mozilla/45.0 (compatible; MSIE 6.0; Windows NT 5.1)
Mozilla/4.08 (compatible; MSIE 6.0; Windows NT 5.1)
Mozilla/4.01 (compatible; MSIE 6.0; Windows NT 5.1)
Mozilla/4.0 (X11; MSIE 6.0; i686; .NET CLR 1.1.4322; .NET CLR 2.0.50727; FDM)
Mozilla/4.0 (Windows; MSIE 6.0; Windows NT 6.0)
Mozilla/4.0 (Windows; MSIE 6.0; Windows NT 5.2)
Mozilla/4.0 (Windows; MSIE 6.0; Windows NT 5.0)
В 2х словах: автоматически средствами .net фреймворка и ОС.
Средств управлять ими на низком уровне в .net нет и слава богу.
Все что делается из кода - это создание потоков и управление афинити маской.
Реализация фреймворка уже занимается распределением нагрузки от этих потоков на процы/ядра.
Так что хз. Если ты сильно по этой теме заморачиваешься, то тут нужен только c++ дорген, думаю с уровня c++ можно все что угодно провернуть.
А кол-во потоков выбираешь ты? Или тоже .net регулирует? Потому как я наблюдал вроде порядка 21, при этом свободные ресурсы ещё оставались.
Системного накопления времени генерации нет, так что не будь параноиком.
Слушай, только без обид, это не претензия, а вопрос, чтобы вкурить что к чему :)
А по поводу распределения по ядрам, можешь в двух словах объяснить как происходит распределение?
Нет, не видно. В конце также как и в середине и в начале.
Рендом ключей был 30к-45к. Вот смотри в 15.09.2015 8:19:29 - 12 минут заняло (грубо говоря 45к, это максимум)
А 15.09.2015 21:37:09 и 15.09.2015 22:12:17 там уже 20 мин.
Разброс не хилый получается 12-20 мин на одинаковое кол-во ключей.
TopperHarley, помоему пандора где-то подмусоривает.
Вот лог генерации. В скобках указал сколько ключей в дорах. Кроме пандоры на компе ничего нет(винда недавно установленная комп пустой). Комп ни кто не использовал во время генерации. По логу видно, что в начале генерации пакетки, времени на один дор уходило меньше чем в под конец.
И ещё вопрос про многопоточность, не обращал внимания на intel, но вот на амд пронаблюдал. Странно как-то распределяется нагрузка на разные ядра. Иногда бывает так, что одно ядро 80-100%, а есть ядра на которых 0-1%. Как-то не равномерно распределяется. Если нужно, наделаю скринов загрузки оперативки, цп, жеского на intel и амд как будет время.
TopperHarley, вот такая ошибка возникает когда жесткий диск не поспевает за доргеном?
В файле тюнинга
//pause=20
TopperHarley, Я всё со своим поломанным jquery,
Я так понимаю, что пандора пытается обработать макрос вариаций.
Как быть если нужно вставить тег только в определённом файле js?
Тюнинг параметр:
//Список внешних файлов шаблона, в которых выполняется обработка
//ExtTemplateFiles=.htm,.html,.js,.css,.php,.htaccess
Попробуй вписать так:
ExtTemplateFiles=.js
И тогда уже все-таки включить опцию "и обрабатывать макросы.."
Не совсем то, у меня почему-то коцается файл jquery.min(оригинальный в нём ничего не правил), причём не всегда, на одних сайтах он коцается на других нет.