Проблемы с Мастерхост. Сайты недоступны более суток

А, ну тогда я не удивлен)))) У меня-то сайт в общем-то не маленький, а у тебя, по сравнению со мной, так почти в 10 раз больше! Чего ж ты хочешь? Я бы даже с 10000 страницами брал VPS не задумываясь, а у тебя 30000. По какой причине это устраивало МХ - трудно сказать. Может, они внимания не обращали, может лояльны были к тебе, может еще что. На всякий случай сделай то, что я написал. Посмотрим, что будет с нагрузкой дальше. И напиши в суппорт Бегета, попроси их логи за самые "нагрузочные" дни там будут IP, страны и все боты (плохие и хорошие). Посмотрим, что у тебя там.

Had, а мнение Скуратова, зашкварившегося с телками в бане, для суда должно стать истиной в последней инстанции? Круто, че)))

Я всё могу отличить. Я знаю, что домен арендуется.

В плане этого ты прав:

Но не всё так однозначно. Домен это часть сайта. Намёк понял? Ты забираешь сайт, а тебе не дают домен.

---------- Добавлено 13.03.2020 в 03:12 ----------

fmd1, короче мне лень спорить. Лично я могу 100% написать заявление в ментовку и возбудят уголовное дело. А дальше как суд решит. В любом случае владельцу МХ придётся придти в суд. а если таких как я 100-200-300 будет? Он ближайшие свои годы проведёт больше в судах, чем дома.:)

А если я привлеку журналистов то этих сто будет 500-1000 и больше. :) Весёлая жизнь будет у хозяина МХ. :)

Нет, не можешь. В этом твоя беда. Понимаешь, ты мог сразу написать жалобу в КЦ и решить свой вопрос. Но вот почему ты этого не делаешь, а строчишь тут - не могу взять в толк.

Извини, но ты бредишь. Сайт - это контент. Забирай контент, запиши его на DVD+R или на флэшку - и все. Домен только не трожь, не твой он.

Неа. Не возбудят. Отказной будет. Могу с тобой поспорить на любую сумму денег (при условии, что в твоем ОВД начальник или кто-то типа него не числятся у тебя в родственниках). Невозможно поверить, что такой горячечный бред пишет человек с юридическим дипломом. Хотя, если ты кончал какую-нибудь "Академию Наташи Нестеровой", то ничего удивительного: там выпускники не знают 1-ю статью Конституции. Так шта... )))

Не будет суда. Отказное будет. Можем пари заключить, юрЫст)))

К сожалению, да. А может и нет. Ведь твоя ересь развалится на стадии досудебки, куда под большим вопросом пойдут юристы МХ. Ты только не забывай, что не каждый "за бесплатно" будет бегать в суд по твоим кляузам. Попросит МХ судью удовлетворить оплату их адвоката и - уверяю тебя - останешься без штанов. Они вон армянина на 5 лямов развести хотели. И хотя развели только на 500 тыщ (это притом, что даже следов его "правонарушения" невозможно отыскать в Интернете), но тем не менее. А уж с такого дурака, как ты, можно просить и все 10. Ведь только дурак будет сидеть и наматывать сопли на кулак, вместо того, чтобы уже взять и стукануть в КЦ.

Неа. И знаешь, почему? Потому что такие, как ты, будет плеваться на форумах, а не подавать жалобы. Такая твоя сущность. Ты малый-то добрый, хотя и чудаковатый)))

Че так сдулся быстро? За журналистов прячешься? А как же суды, уголовка и кара на несколько лет от юрЫста с крутым дипломом?)))))))

Это да. Но только не ты им ее устроишь)))) Ты будешь тут сопли жевать ежедневно))) У каждого своя судьба, но твоя незавидная)))))

---------- Добавлено 13.03.2020 в 04:03 ----------

Беневоленский оказывается родился в Марий-Эле и злостно нарушает ПДД.

https://sudact.ru/regular/doc/ag8M2c0W0UHv/

P.S. Беневоленский, если кто не в теме, собственник ДЦ МХ, который и устроил блэкаут с серверами.

Кстати вот топ юзерагентов сайта за один день

Пустая (синяя) строка - это сам сервер обращается к файлам на сервере напрямую - тоже не могу понять, почему это попадает в запросы? Хотя, пусть этих запросов много, но СР они практически не жрут.

А вот боты яндекса, мэйл.ру, bing скорее всего и дают жару(

Да, и на первом месте юзерагент из Осло, Норвегия. Делает строго по 2 запроса в час по корневым рубрикам сайта - вот нафига?

В январе, кстати, примерно также задрал бот одной московской конторы, которая составляет рейтинги СМИ. Вычислил их, позвонил в офис, сказал либо я вашего бота забаню, либо вы сделаете, чтобы он раз в день заходил)))

Вроде поняли меня, но не до конца - их робот так и обходит рубрики раз в 2 часа (вместо 4 раз в час раньше). И поэтому он, сyка, на 5 месте в этом топе, вместо первого.

Короче, понятно, поисковые боты = зло. Ага, скажите это SEOшникам!

О, как раз, внимание, вопрос! Как сделать так, чтобы роботы больше не обходили несколько тысяч страниц, но эти страницы не выпали бы из индекса?

.

Vittorino, ха! Ну вот видишь! Я же тебе сказал - запроси логи у Бегета. Осло в бан сразу, это как раз bad bot. Bing, mail и Яндекс трогать нельзя. Ну если у тебя с головой все хорошо, конечно, ты и не будешь их трогать))) Я тебе больше скажу: у меня в бане и РЕГ.РУ стоит, их боты тоже статистику собирают. Задобали в свое время.

Вот моя статистика за 9 марта:

Здравствуйте!

Прикладываю статистику по нагрузке за 9 марта:

Top 13 of 13 domains:

-------------------------------------------

13602 85.41%

2218 13.93%

30 0.19%

21 0.13%

10 0.06%

10 0.06%

8 0.05%

8 0.05%

7 0.04%

7 0.04%

3 0.02%

1 0.01%

1 0.01%

Top 20 of 3069 IPs:

-------------------------------------------

1678 10.54% 66.249.66.209 - United States: Google Inc.

1197 7.52% 109.238.247.83 - Russian Federation, Korolev

764 4.80% 66.249.66.211 - United States: Google Inc.

663 4.16% 5.101.159.150 - Beget Support

521 3.27% 178.140.218.187 - Russian Federation, Moscow

391 2.46% 141.8.183.100 - Russian Federation: YANDEX LLC

365 2.29% 66.249.66.213 - United States: Google Inc.

356 2.24% 66.249.66.80 - United States: Google Inc.

272 1.71% 66.249.66.81 - United States: Google Inc.

231 1.45% 17.58.98.86 - United States, Cupertino

201 1.26% 147.75.65.86 - United States, Apo

184 1.16% 37.112.145.99 - Russian Federation, Lipetsk

178 1.12% 66.249.66.82 - United States: Google Inc.

143 0.90% 94.25.168.65 - Russian Federation, Moscow

141 0.89% 46.242.45.167 - Russian Federation, Moscow

129 0.81% 91.228.118.1 - Russian Federation, Khimki

124 0.78% 5.45.207.76 - Russian Federation: YANDEX LLC

116 0.73% 178.140.140.251 - Russian Federation, Moscow

91 0.57% 85.89.127.32 - Russian Federation, Moscow

87 0.55% 176.59.39.171 - Russian Federation, Moscow

Top 20 of 1190 User-Agents:

-------------------------------------------

2460 15.45% Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

1198 7.52% Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:57.0) Gecko/20100101 Firefox/57.0

1187 7.45% Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

722 4.53% Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36

707 4.44% Mozilla/5.0 (iPhone; CPU iPhone OS 13_3_1 like Mac OS X) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/13.0.5 Mobile/15E148 Safari/604.1

559 3.51% Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36

412 2.59% Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; Win64; x64; Trident/4.0; .NET CLR 2.0.50727; SLCC2; .NET CLR 3.5.30729; .NET CLR 3.0.30729; Media Center PC 6.0; .NET4.0C; .NET4.0E; Tablet PC 2.0)

381 2.39% Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)

357 2.24% Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Ubuntu Chromium/80.0.3987.87 Chrome/80.0.3987.87 Safari/537.36

326 2.05% Mozilla/5.0 (compatible; YandexMetrika/2.0; +http://yandex.com/bots yabs01)

320 2.01% Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

310 1.95% Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36

231 1.45% Mozilla/5.0 (Macintosh; Intel Mac OS X 10_10_1) AppleWebKit/600.2.5 (KHTML, like Gecko) Version/8.0.2 Safari/600.2.5 (Applebot/0.1; +http://www.apple.com/go/applebot)

201 1.26% SearchAtlas.com SEO Crawler

179 1.12% Mozilla/5.0 (compatible; Linux x86_64; Mail.RU_Bot/2.0; +http://go.mail.ru/help/robots)

145 0.91% Mozilla/5.0 (iPad; CPU OS 6_1_3 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10B329 Safari/8536.25

130 0.82% Mozilla/5.0 (Linux; Android 5.1; MX5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Mobile Safari/537.36

129 0.81% Mozilla/5.0 (Windows NT 5.1; rv:9.0.1) Gecko/20100101 Firefox/9.0.1

111 0.70% Mozilla/5.0 (iPhone; CPU iPhone OS 13_3 like Mac OS X) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/13.0.4 Mobile/15E148 Safari/604.1

99 0.62% Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Safari/537.36

Top 2 of 2 METHODs:

-------------------------------------------

15903 99.86% GET

23 0.14% POST

Вот видите, что то начинает обрисовываться.

Скорее всего у вас не существует файла sitemap.xml и у вас он генерируется с нуля на каждый запрос, от туда 10+CP, я одно время игрался с опенкартом, там такой же принцип, генерация карты сайта автоматом (но возможно с кэшем, но не суть), так вот на 2500 тестовых товаров, сайт падал по таймауту в 30 секунд, то есть скрипту нехватало времени собрать карту сайта на 2500 товаров, у вас 30000 страниц верно? вы на каждом запроче генерируете карту сайта. Переделайте плагин, генерируйте карту сайта в статику только при добавлении/удалении материалов и страниц.

admin-ajax.php не уверен, спецы поправят, но на сколько помню я, его использует не только админка, а в том числе и плагины на него отправляют ajax запросы. Сам файл это лишь фронт контроллер, то есть он просто принимает запросы, а обрабатывают их уже какие то плагины которые на них подписаны. Если вы знаете что такое xhprof, так включите его, посмотрите что дольше всего отрабатывает, делов то на 10 минут. Так вы вычислите плагины, которые нагружают систему больше всего, найдёте узкие места и исправите. И самое главное это не для хостинга, а для того чтобы ваш сайт работал быстрее в целом

Походу фин.отдел Мастерхоста тоже захватили или не пускают сотрудников отвечать на тикеты.

Жду ответ с 9 марта, по компенсации. Пока тишина...

Ага, украли инопланетяне. Я думаю им сейчас и без возвратов трудно, набираемся терпения.

Телефон работает?

---------- Добавлено 13.03.2020 в 15:13 ----------

fmd1, не буду спорить. Я написал своё ИМХО.

мне кажется можно ответить в тикете за 5 рабочих дней...