kostich: Роман, когда я прошу девушку перерстать жевать устрицу и тупо её проглотить, то мы потом общаемся за вкус устриц. Если тупо проглить, то оно будет условно вкусно конечно... деликатес как никак... а если пожевать, то результат спорный... другое дело лобстеры какие или омары... так вот я NFS под фрей хаваю с 97 года и граждан что-то там поясняющих могу на раз спросить... NFS давно уже не устрица и повара в виде NetApp для неё не надо. Появились жамбафреймы, появились свичи умеющие наманую жамбу.. вы вкугсе зачем в свичах делают поддержку жамбафреймов?
Спрашивайте, я не особый знаток NFS, я рассказал о том, что тестировал.
Джамбофреймы для увеличения производительности сети - угадал ? 🤣D:D
kostich:
поясните мне, пожалуйста, как нода может отвалиться от нфс сервера и умолчать о причине потери связи? это фантастика.
Причем тут одно к другому, я что сказал что он просто отваливается и все ? тишина? Тут тема не об этом, я рассказывал в другой теме на этом же форуме о том, как оно отваливается и почему, ловили Timeout... но пояснить его причины закономерными фактами не удалось, сервера в порядке, связь в порядке (проверено альтернативными тестами, т.е нет потерь, нет ошибок, нет коллизий, так же не падали порты в которые воткнуты ноды и прочее, или думаете я полгода наблюдал и не нашел причины в логах ??? :) ) и при всей вашей любви к джамбофреймам замечу, что таковые настройки не использовались, но простите, если NFS не работает нормально при стандартном размере кадра, то о чем можно говорить ? Вы еще скажите что для его нормальной работы надо пару свичей правильных купить, тогда я вас вовсе зауважаю :))))
P.S: Так же отдельно замечу что надобности в использовании нестандартных кадров не было, так как кластер к нодам передавал че-то около 30-50Mb/s :))) Т.е утилизация была вполне штатной.
Romka_Kharkov добавил 03.06.2011 в 02:48
kostich:
kostich добавил 03.06.2011 в 02:44
ну вот подсчитайте сколько будут 5% от 20Тб ... а если от 200Тб?
А для любителей и ценителей NFS поясняю - оно не работает !!! Просто и доступно, имел очень хороший опыт работы с NFS когда обсматривали панельку Interworx , там есть собственная система кластеризации основанная на NFS, полугодичный тест системы всего то из 4х нод показал что 2-3-4-5 раз в неделю стабильно отваливается NFS, и именно он, ни тачка падает, ни каналы рвутся (везде 100Mb/s в приделах одной стойки), а просто теряется связь по NFS с нодами на которых разложен контент. Пример конечно не ярко описывает работу именно самого NFS но проблема в нашем случае были именно с ним ...... так как все остальные сервисы работают на ура, только вот контент не отдают, потому что он за NFS на соседней машине, открестился от использования такого рода системы сразу же .
Что касается альтернатив, куда лучше и проще например сливать через rsync данные даже при условии что изначально они будут попадать на основной сервер а не на тот который предназначен под картинки.... чем использовать NFS....
Андрейкин пример с xFS это конечно прикольно и я бы сказал правильно, но что-то гложет меня сомнение ввиду просмотра одного из его выступлений, где он ссылаясь на каких-то Cisco специалистов утверждает что схема кластеризации будет работать - такой подход я не разделяю :)
Romka_Kharkov добавил 03.06.2011 в 02:35
kostich:
kostich добавил 03.06.2011 в 02:19 А, забыл добавить... фотохостинг это не соц. сеть... давайте вот сделаем хостинг аватарок... какую эффективность кэша спрогнозируете?
Процент вывести достаточно сложно, но скажу вам так , что в приделах 200 GB картинок (именно картинок) 3 сервера по 4 GB памяти, справляются с актуальными данным на ура. Т.е задействовано не более 10 GB памяти, естественно остальное подчитывается по требованию. (squid)
Актуальными данными в моем случае принято считать 5-10 % от общей массы, потому как есть скажем так "новые картинки" которые сейчас смотрят тысячи люде на разных сайтах, а есть картинки которые запрашивались полгода назад последний раз или запрашиваются 1 раз в полгода :)) Конечно если ВСЕ положить в память..... епта, не хватит памяти.... :)))) Мне кажется надо правильно оперировать кешом и будет счастье :)
mak3r: Переезжаю со своей ВПСки на выделенный сервер (вернее планирую)
Подыскиваю вариант с хорошей технической поддержкой (обязательно)
Так же нужна будет помощь по переносу тучи сайтов. около 2000. все на хтмл - то есть никакой возни с БД и тп. по сути просто скопировать.
Бюджет в пределах 80уе
В будущем планируется размещение множества хтмл сайтов (без запрещенки и адалта)
Dual Core ATOM 410
2 GB RAM
200 GB HDD
10mb UNMETERED!
80$ / месяц
Для HTML сайтов подойдет без вопросов. Перенос 20$ разово при условии, что ДНС вы повернете сами, а так же нет почты и прочего связанного с доменами (только html).
Mr.Justice: Что в Вашем понимании "большая посещаемость"?
+1
ТС, у нас есть клиенты которые при "большой посещаемости" берут 10 выделенных серверов и строят ферму. О каком уровне вы говорите? 10k ? 100k ? 1mln ? 10mln ? (в сутки)
andragen: ок если сменить сайт крутящийся в Москве с описанием сервера что в первом посте на Германию. Какие пдюсы и минусы?
Я думаю что можно немного выиграть с точки зрения цены, в Германии будет сервер дешевле (аренда) чем в RU (субъективно). Но если вы говорите о сайтах , то думаю что разницы в скорости и прочем вы не получите.
Из Украины в Россию у меня например ~20-30ms , а в Канаду ~150ms, но на HTTP трафике (открытии страниц) отличить это просто нереально.
P.S: Никто не даст вам перенести российский ИП куда-то в Германию или еще куда :) У вас там будет новый , Немецкий ип...
Romka_Kharkov добавил 02.06.2011 в 19:11
ArtemZ: в россии ниже пинги и "все свои"
Как-то самоуверенно что ли :D
Ниже чем где? Ниже чем откуда до куда? Внутри MSK-IX наверное пинги лучше чем за границу, спорить нет смысла, но это все равно что сказать что у меня в UA-IX пинги ниже чем в MSK-IX :)))) Трафик то он ходит не только по точкам обмена :)
sstyle добавил 01.06.2011 в 14:43 Мне иногда кажется что я спрашиваю на форуме садоводов как собрать адронный-коллайдер на даче из подручных средств. ну у всех на серваках ведь стоит...
А на мой взгляд MRTG это и есть адронный-коллайдер..... почему не использовать rrdtool + perl например, вы все равно для MRTG вынимаете информацию внешними скриптами, так пихайте её в RRD базы и стройте графики любого типа, цвета, и.т.п.... MRTG перестал использовать много лет назад.
В данный момент идут торги за право, быть избранным.
За 150 $ в месяц? :)))) ROTFL :)) я даже читать топик до конца не буду в таком случае, заказчик "тот еще".
Romka_Kharkov добавил 17.05.2011 в 22:24
Nanotik:
Вы действительно считаете, что ваше предложение настолько уникально и настолько ценно, что администраторы должны хвататься за него как за манну небесную?
1qwert2: Всем спасибо за ответы, я понял, что бюджет нереален. Тема закрыта.
Готовы обсудить с вами ваше размещение, есть спец. оборудование для аналогичных отдач, но не совсем ясно количество, при 11 тачках по 2x100Mb/s пора в каждой, можно теоретически отдать 2.2 GB/s..... Но вы говорите 110TRB в месяц, а это ~ 350 Mb/s, такую раздачу я думаю можно отдавать с 2-3х серверов и при этом они не будут сильно нагружены.
Я думаю , что если вы немного определитесь с тем, что же вы хотите, а так же постучите нам в аську, мы сможем найти разумное решение для вашей задачи в приделах вашего бюджета. Есть железки которые балансируют до 4 Gb/s (возможна аренда)
Sergey11: Всем привет! Перенес сайт на другой хостинг, в результате такая картина: Саппорт уже продолжительное время молчит, но сайт простаивает - это нехорошо. Кто-нибудь знает в чем причина? Проблема в неправильном переносе или на стороне хостера? Заранее благодарен.
Данная страница говорит о том, что вы не попадаете в окружение <VirtualHost>, соответственно как писалось ранее, либо указана не верная папка для домена, либо не совпадает IP адрес прописанный в DNS и VirtualHost, т.е вы приходите по домену www.domain.com на IP 1.1.1.1, а в VirtualHost настроен ip 2.2.2.2 (к примеру). Так же наблюдал еще веяние, когда в skel заносится аналогичная страница, и как бы при создании домена по умолчанию отображается, уверены ли вы в том, что ваш контент находится в папке www (public_html) ? Может вам акаунт создали, а данных там нет? Кстати описанная проблема несоответствия ИП адресов наблюдалась в моменты когда человек внутри одного сервера меняет IP адрес... В этом случае опять же, пока у вас ДНС показывает старое... а apache уже слушает новое.... эффект такой-же... кстати не плохо бы установить в браузер модуль MyIP, вполне может быть , что ваша картинка которую вы вставили вообще показывается из "старого" места, где домен уже удален....
Роман, когда я прошу девушку перерстать жевать устрицу и тупо её проглотить, то мы потом общаемся за вкус устриц. Если тупо проглить, то оно будет условно вкусно конечно... деликатес как никак... а если пожевать, то результат спорный... другое дело лобстеры какие или омары... так вот я NFS под фрей хаваю с 97 года и граждан что-то там поясняющих могу на раз спросить... NFS давно уже не устрица и повара в виде NetApp для неё не надо. Появились жамбафреймы, появились свичи умеющие наманую жамбу.. вы вкугсе зачем в свичах делают поддержку жамбафреймов?
Спрашивайте, я не особый знаток NFS, я рассказал о том, что тестировал.
Джамбофреймы для увеличения производительности сети - угадал ? 🤣D:D
поясните мне, пожалуйста, как нода может отвалиться от нфс сервера и умолчать о причине потери связи? это фантастика.
Причем тут одно к другому, я что сказал что он просто отваливается и все ? тишина? Тут тема не об этом, я рассказывал в другой теме на этом же форуме о том, как оно отваливается и почему, ловили Timeout... но пояснить его причины закономерными фактами не удалось, сервера в порядке, связь в порядке (проверено альтернативными тестами, т.е нет потерь, нет ошибок, нет коллизий, так же не падали порты в которые воткнуты ноды и прочее, или думаете я полгода наблюдал и не нашел причины в логах ??? :) ) и при всей вашей любви к джамбофреймам замечу, что таковые настройки не использовались, но простите, если NFS не работает нормально при стандартном размере кадра, то о чем можно говорить ? Вы еще скажите что для его нормальной работы надо пару свичей правильных купить, тогда я вас вовсе зауважаю :))))
P.S: Так же отдельно замечу что надобности в использовании нестандартных кадров не было, так как кластер к нодам передавал че-то около 30-50Mb/s :))) Т.е утилизация была вполне штатной.
Romka_Kharkov добавил 03.06.2011 в 02:48
kostich добавил 03.06.2011 в 02:44
ну вот подсчитайте сколько будут 5% от 20Тб ... а если от 200Тб?
А это сколько миллиардов*миллиарды аватар ?:))))
ТС, есть такое вот решение:
/ru/forum/comment/7069575
А для любителей и ценителей NFS поясняю - оно не работает !!! Просто и доступно, имел очень хороший опыт работы с NFS когда обсматривали панельку Interworx , там есть собственная система кластеризации основанная на NFS, полугодичный тест системы всего то из 4х нод показал что 2-3-4-5 раз в неделю стабильно отваливается NFS, и именно он, ни тачка падает, ни каналы рвутся (везде 100Mb/s в приделах одной стойки), а просто теряется связь по NFS с нодами на которых разложен контент. Пример конечно не ярко описывает работу именно самого NFS но проблема в нашем случае были именно с ним ...... так как все остальные сервисы работают на ура, только вот контент не отдают, потому что он за NFS на соседней машине, открестился от использования такого рода системы сразу же .
Что касается альтернатив, куда лучше и проще например сливать через rsync данные даже при условии что изначально они будут попадать на основной сервер а не на тот который предназначен под картинки.... чем использовать NFS....
Андрейкин пример с xFS это конечно прикольно и я бы сказал правильно, но что-то гложет меня сомнение ввиду просмотра одного из его выступлений, где он ссылаясь на каких-то Cisco специалистов утверждает что схема кластеризации будет работать - такой подход я не разделяю :)
Romka_Kharkov добавил 03.06.2011 в 02:35
kostich добавил 03.06.2011 в 02:19
А, забыл добавить... фотохостинг это не соц. сеть... давайте вот сделаем хостинг аватарок... какую эффективность кэша спрогнозируете?
Процент вывести достаточно сложно, но скажу вам так , что в приделах 200 GB картинок (именно картинок) 3 сервера по 4 GB памяти, справляются с актуальными данным на ура. Т.е задействовано не более 10 GB памяти, естественно остальное подчитывается по требованию. (squid)
Актуальными данными в моем случае принято считать 5-10 % от общей массы, потому как есть скажем так "новые картинки" которые сейчас смотрят тысячи люде на разных сайтах, а есть картинки которые запрашивались полгода назад последний раз или запрашиваются 1 раз в полгода :)) Конечно если ВСЕ положить в память..... епта, не хватит памяти.... :)))) Мне кажется надо правильно оперировать кешом и будет счастье :)
Переезжаю со своей ВПСки на выделенный сервер (вернее планирую)
Подыскиваю вариант с хорошей технической поддержкой (обязательно)
Так же нужна будет помощь по переносу тучи сайтов. около 2000. все на хтмл - то есть никакой возни с БД и тп. по сути просто скопировать.
Бюджет в пределах 80уе
В будущем планируется размещение множества хтмл сайтов (без запрещенки и адалта)
Dual Core ATOM 410
2 GB RAM
200 GB HDD
10mb UNMETERED!
80$ / месяц
Для HTML сайтов подойдет без вопросов. Перенос 20$ разово при условии, что ДНС вы повернете сами, а так же нет почты и прочего связанного с доменами (только html).
Что в Вашем понимании "большая посещаемость"?
+1
ТС, у нас есть клиенты которые при "большой посещаемости" берут 10 выделенных серверов и строят ферму. О каком уровне вы говорите? 10k ? 100k ? 1mln ? 10mln ? (в сутки)
ок если сменить сайт крутящийся в Москве с описанием сервера что в первом посте на Германию. Какие пдюсы и минусы?
Я думаю что можно немного выиграть с точки зрения цены, в Германии будет сервер дешевле (аренда) чем в RU (субъективно). Но если вы говорите о сайтах , то думаю что разницы в скорости и прочем вы не получите.
andragen,
Абстрагируйтесь, разница пингов откуда и куда?
Из Украины в Россию у меня например ~20-30ms , а в Канаду ~150ms, но на HTTP трафике (открытии страниц) отличить это просто нереально.
P.S: Никто не даст вам перенести российский ИП куда-то в Германию или еще куда :) У вас там будет новый , Немецкий ип...
Romka_Kharkov добавил 02.06.2011 в 19:11
в россии ниже пинги и "все свои"
Как-то самоуверенно что ли :D
Ниже чем где? Ниже чем откуда до куда? Внутри MSK-IX наверное пинги лучше чем за границу, спорить нет смысла, но это все равно что сказать что у меня в UA-IX пинги ниже чем в MSK-IX :)))) Трафик то он ходит не только по точкам обмена :)
sstyle добавил 01.06.2011 в 14:43
Мне иногда кажется что я спрашиваю на форуме садоводов как собрать адронный-коллайдер на даче из подручных средств. ну у всех на серваках ведь стоит...
А на мой взгляд MRTG это и есть адронный-коллайдер..... почему не использовать rrdtool + perl например, вы все равно для MRTG вынимаете информацию внешними скриптами, так пихайте её в RRD базы и стройте графики любого типа, цвета, и.т.п.... MRTG перестал использовать много лет назад.
В данный момент идут торги за право, быть избранным.
За 150 $ в месяц? :)))) ROTFL :)) я даже читать топик до конца не буду в таком случае, заказчик "тот еще".
Romka_Kharkov добавил 17.05.2011 в 22:24
Вы действительно считаете, что ваше предложение настолько уникально и настолько ценно, что администраторы должны хвататься за него как за манну небесную?
Видимо именно так :D
Всем спасибо за ответы, я понял, что бюджет нереален. Тема закрыта.
Готовы обсудить с вами ваше размещение, есть спец. оборудование для аналогичных отдач, но не совсем ясно количество, при 11 тачках по 2x100Mb/s пора в каждой, можно теоретически отдать 2.2 GB/s..... Но вы говорите 110TRB в месяц, а это ~ 350 Mb/s, такую раздачу я думаю можно отдавать с 2-3х серверов и при этом они не будут сильно нагружены.
Я думаю , что если вы немного определитесь с тем, что же вы хотите, а так же постучите нам в аську, мы сможем найти разумное решение для вашей задачи в приделах вашего бюджета. Есть железки которые балансируют до 4 Gb/s (возможна аренда)
Всем привет!
Перенес сайт на другой хостинг, в результате такая картина:
Саппорт уже продолжительное время молчит, но сайт простаивает - это нехорошо. Кто-нибудь знает в чем причина? Проблема в неправильном переносе или на стороне хостера?
Заранее благодарен.
Данная страница говорит о том, что вы не попадаете в окружение <VirtualHost>, соответственно как писалось ранее, либо указана не верная папка для домена, либо не совпадает IP адрес прописанный в DNS и VirtualHost, т.е вы приходите по домену www.domain.com на IP 1.1.1.1, а в VirtualHost настроен ip 2.2.2.2 (к примеру). Так же наблюдал еще веяние, когда в skel заносится аналогичная страница, и как бы при создании домена по умолчанию отображается, уверены ли вы в том, что ваш контент находится в папке www (public_html) ? Может вам акаунт создали, а данных там нет? Кстати описанная проблема несоответствия ИП адресов наблюдалась в моменты когда человек внутри одного сервера меняет IP адрес... В этом случае опять же, пока у вас ДНС показывает старое... а apache уже слушает новое.... эффект такой-же... кстати не плохо бы установить в браузер модуль MyIP, вполне может быть , что ваша картинка которую вы вставили вообще показывается из "старого" места, где домен уже удален....