Romka_Kharkov

Romka_Kharkov
Рейтинг
485
Регистрация
08.04.2009
Должность
Хостинг
Качественный хостинг

Обратите внимание на наши тарифы, есть несколько тарифов с безлимитным трафиком по вашему бюджету, размещение в Канаде, cPanel, никаких доп. платежей нет (пожалуй за исключением вашего желания сделать апгрейд).

iHead:

Походу в Apache 2 немного по иному

Cуть остается прежняя, 200 МБ я за пару секунд никак получить не мог, а в логе они отмечены. :(

iHead:
проверил, Apache 1.3.41, прямой коннект через wget, стопаю закачку файла по control+c. расхождение между тем, что реально принято на диск и по строке в логе апача - 0.09%. т.е. фактически расхождения нет, т.к. эти 0.09% скорее всего оказались в буфере wget, который не сбросился на диск.

Вы хотите сказать что в моем примере я за 2 секунды получаю в Украине 200MB из Канады?

Я был бы весьма рад такой скорости :D :D :D Просто Get формируется на момент старта просмотра. обращение к файлу есть, но это вовсе не означает что 200MB уже заехали клиенту....

Что бы было более предметно рассказываю:

Открываю к примеру вот этот линк: http://video.kruaze.kharkov.ua/viewtopic.php?f=8&t=24, нажимаю в первом ролике Play, жду 2 секунды ровно, и потом тыкаю на любую другую ссылку которая уводит меня с этой страницы, при этом получаю в логе апача следующее:

my.ip.there - - [04/Jun/2011:15:26:23 -0400] "GET /video/kh-oblast-2010-2011-etap4/Zond-Ovsyannikov/frame1.flv HTTP/1.1" 200 229555542 "-" "Mozilla/5.0 (Windows NT 6.1; WOW64; rv:2.0.1) Gecko/20100101 Firefox/4.0.1"

Т.е 229 мегабайт за 2 секунды, тоесть 114 мегабайта за 1 секунду, и получаем около 900 мегабит? :) Если просто качаю путем wget ... ETA ~= 5min :)

Или я упускаю что-то важное?:)

Romka_Kharkov добавил 04.06.2011 в 23:34

iHead:
расхождение между тем, что реально принято на диск и по строке в логе апача - 0.09%

О каком расхождении речь? Апач разве выдает вам в логе сколько было отдано процентов от файла? он пишет там общий размер файла (фактический) который был якобы отдан клиенту .... Вы что-то путаете IMHO.

Если посмотреть тот же файл у меня на винте:

-rw-r--r-- 1 kruaze kruaze 229555542 Apr 21 11:38 video/kh-oblast-2010-2011-etap4/Zond-Ovsyannikov/frame1.flv

Понимаете теперь о чем я?:) кто-то зашел на 10 аналогичных ссылок, тыкнул, посмотрел по 2 секунды и закрыл все 10... у меня фактически по логам 2,2 GB отдано, но это БРЕД :D А всякие вебалайзеры и прочие анализаторы логов явно покажут 2.2 GB :)

ArtemZ:
Ну есть там наш айпи, он принадлежит серверу с виндой, который в свою очередь принадлежит нашему клиенту.

ArtemZ добавил 04.06.2011 в 10:57
Это просто хрумер парсит банлисты форумов (например http://forum.bratsk.org/banlist.php), а вы уж переполох устроили ;)

Я не переполох устроил, просто много обращений, хотелось бы понять их намерения. Не более того, а теперь если можно немного подробнее "what is хрумер" и зачем он парсит что-то на моем вебхосте? тем более никаких форумов там нет :D

iHead:
Это возможно, если:
1) используется связка nginx+Apache, при этом логи пишутся Apache (Apache быстро отдал файл nginx'у, атот медленно отдает клиенту). В этом случае логи надо писать на уровне nginx.
2) используется кеширующий сервер (прокся) с хорошей скоростью (контент быстро забрался по сети, а до конечного компьютера еще не дошел). В этом случае трафик реально отдан сервером.

Данная аномалия зафиксировано при использовании исключительно Apache , никаких связок, ничего.... проверьте... я долго ломал голову сам ;)

Romka_Kharkov добавил 04.06.2011 в 22:44

AlexVenga:
Прошу прощения, за возможно нубский вопрос, ибо в никс системах пока слаб. Но разве нет какой-либо софтины, которая бы вешала на все порты сетевой карты демона, который писал бы данные по каждому пакету, неважно какой протокол, главное что пакет пришел или ушел? Тогда бы логировалось все.

Есть :) Только уровень немного другой, порты не важны, важен вход и исход побайтный на исходящем интерфейсе.

Romka_Kharkov добавил 04.06.2011 в 22:47

IQPartner:

Кстати, что такое RRD?

Вообще-то это база данных ;))) Если смотреть в корень, но используется она для хранения инкрементных данных приобразовывая их по некой формуле, яркость заключается в том, что размер базы не меняется от количества данных, они просто агригируются в следующее значение и могут быть вытащены за любой период согласно алгоритму.

Настоятельно рекомендую использовать rrdtool + perl вместо MRTG.

IQPartner,

Вы уже сейчас тратите время в пустую, хотя поговорить с не спящим админам всегда в кайф :) И посоветовать что-то это святое дело. Давайте рассмотрим ситуацию как есть и разберем основные моменты не внедряясь в цифры и всякие двусторонние вопросы.

Надеюсь у вас есть хоть какой-то договор, это раз, в противном случае доказывать нечего!!! и стоит сразу перейти к варианту описанному выше "или зажмурится и заплатить или искать другое место и переежать". Дальше, хостер разве говорит вам "уважаемый клиент, давайте обсудим куда вы дели трафик"? Нет... они вам говорят "вы израсходовли больше чем полагается будьте любезны заплатить", разница видна невооруженным глазом. У вас нет собственной статистики потребления трафика вашим сервером, это разве нормально? О каких прозрачных отношениях может идти речь, как вы вообще теперь будете доказывать, что это не вы его израсходовали, потому что написать тут на форуме в надежде найти поддержку это одно, а как известно доказывать стоит фактами и аргументами которых у вас на сколько я понимаю нет. Точнее они есть в виде WHM статистики, которая как сказал многоуважаемый delicate ничего не стоит, так как в нее входит только тот трафик который снимается с логов того самого FTp/HTTP и прочего о чем вы пишите, кроме этого есть еще огромная куча трафика который cPanel просто не умеет считать - это факт, я это полностью подтверждаю.

Что имеем в остатке, вы хотите все таки решить ситуацию какими-то дебатами, в принципе это конечно возможно, но шансы минимальны, сможет ли ДЦ "понять и простить" (С) - не уверен... Но сразу хочу предостеречь вас о следующем: Как только ДЦ поймет что вы не собираетесь оплачивать "долг", да именно так и позиционируется тот трафик который следует оплатить по мнению ДЦ , вы можете столкнуться с более сложной и менее решаемой проблемой, например ваш сервер вовсе отключат от сети вместе со всеми данными и прочим и тогда у вас будет только 1 вариант - оплатить и быстро переехать, так вот я сказал что вы уже сейчас теряете время :) Подумайте, потом может быть гораздо хуже :) Это все взято из личных наблюдений по аналогичным вопросам на этом же самом форуме. А так же сюда приложен многолетний опыт работы на стороне ЦОД.

Изучайте договор, если он есть, подавайте в суд, отстаивайте свои права, если вы чувствуете, что аргументов и фактов недостаточно - вопрос не решить в вашу пользу или платите молча или ищите варианты по переезду.

P.S (добалено): Вы только не подумайте что я выгораживаю ДЦ, это напутствия с точки зрения моего опыта.... не более того, а так же мне безусловно было бы интересно узнать о продолжении или решении данного вопроса... Что и как решили , как доказали или не доказали ....

С Уважением,

Romka_Kharkov добавил 04.06.2011 в 04:34

delicate:
то что в графике это явно снята статистика с интерфейса роутера (свича) апстрима или вашего ЦОД. Поэтому желательно и у себя иметь такую же статистику с графиком , что вам даст возможность при всплесках активности просмотреть данные WHM и сравнить разницу. Если разница есть, то уже понятно что данные не сходятся и нужно ловить нарушителя и спасать свои деньги.
Так же вы будете понимать по этим графикам дошел трафик до вас или вам приписывают трафик без оснований.

+1

надо иметь копию всего трафика с точки зрения графиков, надо просто мониторить ВЕСЬ in/out и от этого строить графики...... но увы даже в таких случаях возможны расхождения в статистике, так как не бывает два одинаковых сборщика статистики... даже если обе стороны настроили вы всегда есть шансы что будут утеряны какие-то данные (часть данных) ввиду других-обстоятельств, а статистика в свою очередь уже будет не совпадать, но одно дело когда на фоне месяца где-то пару гиг просвистело - это еще ладно, но когда пару TRB это уже мощно :)

Игорь, ну это же и слону понятно что WHM данные никогда в жизни не будут сходится с фактическими показателями интерфейса... :))))))

Romka_Kharkov добавил 04.06.2011 в 04:45

Еще приведу небольшой пример аномальности в факте подсчета трафика, есть у меня сайтик один на котором FLV исключительно выложено, так вот наблюдаю такую вот картину:

(В одном окошке у меня запущен лог апача по данному сайту, во втором окошке собственно сам сайт открыт), открываю любой FLV скажем размером 200MB .... жду пока начнет проигрываться, и вуаля, выхватываю в логе сообщение о том, что я запросил файл размером 200MB все по честному казалось бы, но беда заключается в том, что я закрыл сайт в браузере еще до момента первой -второй буферизации при просмотре. Что получаем? В логе мой вебхост по честному отдал 200 MB трафика клиенту (якобы), а на стороне клиента .... ну мегабайт 10-20 заехало пока я первые секунды просматривал......

Вот и скажите как учесть такой трафик? Реально ли это вообще? Причем расхождение реального потребления и логирования в десятки раз...... по факту 1 GB израсходовано, а по логам 10 GB... как вам? На объеме 500 Gb в месяц приличные зазоры выходят :D :D :D

kostich:

а если уже совсем за зрелые шутки, то я на досуге под инфинибенд пишу. и таки мне реально твины и свичи симпатизируют с этим протоколом. просто на задачах упирающихся в I/O массштабировать фронты смысла нет... надо работать над дисковой системой и интерконнектом.

Вы работали с инфинибендом ? O_O Вот уже с годик мечтаю, сволочи дорого !!!! :))))

Поделитесь информацией срочно !!! :D

GIGO.biz:
А какой тематики интернет-магазин?

Присоединяюсь к вопросу, можем разместить условно-бесплатно на начальном этапе, если интересует в ПМ или в аську стучите.

Скупщик:
Здравствуйте.
Собираюсь работать с буржуйнетом, потому нужен тариф на хостинг в любой англоязычной стране, по вот таким вот параметрам:
- Кол-во сайтов на аккаунте >=5
- Место под сайт >=200МБ
- аптайм 95-99%
- Трафик анлимит
- Кол-во БД соответствует количеству сайтов
- PHP ну и по-возможности Perl на будующее:)
- Цены в зависимости от параметров.
Заранее спасибо.

День добрый,

Рассмотрите наши варианты на сайте есть полностью удовлетворяющие ваш запрос хостинг тарифы, находится все в Канаде.

pront:
Ну посещаемость там 1500 в сутки.....

Гы, "посещаемый сайт" на мой взгляд это от 50k в сутки... все что меньше располагается на Share,VIP,VPS хостинге....

Всего: 6838