Станислав

Станислав
Рейтинг
258
Регистрация
27.12.2009
OS_ZP_UA #:

И часто вы видели чтобы нормальные поисковые боты делали более 50 запросов в секунду, чтобы их в исключение добавлять?

Мне пришлошь гуглу ограничение ставить на 200 запросов в секунду так как нагружал очень сильно сайт, только после того как 429 ему начал отдавать, он снизил активность и все хорошо стало.

isy.m #:

Похоже, у тебя много запросов сразу, что может тормозить сайт. Можно попробовать объединить скрипты и стили или использовать асинхронную подгрузку, чтобы снизить нагрузку.

У меня все хорошо, так и должно быть, для Next.js это вполне нормально когда идет много запросов, асинхронные как раз и грузят сервер.

Asar :

Есть завал китайских ботов (и не только китайских), причем тех, что не вычисляются по User-Agent, а более злобных товарищей. Хочу вычислить и забанить хотя бы тупо по IP. Для этого ищу прогу, которая на основе загруженных в нее логов могла бы выдавать хотя бы базовый минимум — стату по IP (сортировку по частоте). Вижу платные варианты, но 90 фунтов у меня на это удовольствие нет, а еще нет иностранной карты. Мож есть какой бесплатный вариант, или платный, но местный, рублевый?

С ботами размер суточного лог-файла вырастает многократно, и сейчас этот размер — 200—400 МБ (это для оценки ограничений, если таковые есть у проги или сервиса). Если, вдруг, какие-то онлайн варианты есть, которые работают с такими (а еще лучше — с бОльшими объемами, чтобы не за сутки смотреть) — прекрасно. А уж если еще чего и подписывать умеют (по IP проверять, что да кто и прочий доп. фукнционал) — то и вовсе хорошо. Повторюсь, платный вариант тоже рассмотрю, но с оплатой обычной РФ картой.

Ставь лимитку в nginx на запросы без рефа.

Я еще плюсом айпишники которые были отброшены в базу заношу и прочекиваю их потихонечку по крону. За  менее чем пол года более 6 млн. айпишников, к пенсии думаю все прочекаю)))

Если у тебя такое же гомно ползает, то не думаю что какая то програма тебе поможет на лету отфильтровывать этот шлак, разве что она с базой спамных айпишников.

isy.m #:

Обычный юзер редко превышает пару запросов в секунду.

Вы из каких годов выползли)

Стили, скрипты, картрнки, подгрузка контента и прочее. У меня на сайте при первичной зашрузке пользователь отправляет как минимум 30 запросов, где 8 из них основные, а отстальные это скрипты, картинки и стили.

EdwardEdit #:

 И самое главное - тишина…

А что предлогаете? Ходить по форумам и писать о том как яндекс доит вебмастеров? 

Те у кого есть трафик, начинают его монетизировать какими то своими плюшками для пользователей, перенаправляют трафик в тот же телеграм и там монетизируют его. Сейчас просто это не так массово, но со временем вебмастера надут выыход, и тизерка от Яндекса отживет свое.

Помню на сколько РСЯ была престижна в 2010 годах, туда хотел каждый сунуться, но брали только "избранных", сейчас это помойка куда стянулся весь шлак  интернета, который те самые качественные проекты разбавил на столько сильно что их и не видно нигде.

Доход в РСЯ подстраивают под массу, а масса в РСЯ полный шлак, тем самым хорошие сайты получают копейки.

Была ситуация когда файловый сервер троил, не подгружались картинки, ПФ резко снизился, позиции посыпались, поправил ситуацию с сервером, ПФ подросли, позиции вернулись. Но я не кручу ничего....
plustilino #:

Вы уверенны? Большинство изображений там из Википедии, но текст - копирайт. Я могу писать по своей специальности более-менее. Есть канал на Дзене, так или иначе подтверждающий квалификацию.

Если человек с соответствующим образованием не может монетизировать контент в РСЯ, то кто может? 

Пока здесь никто не решился показать свои сайты. 

Не обращайте внимание, у большинства тут у самих ГС, а они считают что СДЛ. 

Да и по факту чушь все это, занимайтесь сайтом, я бы на вашем месте редизайн сделал, ну чтобы под современные сайты его подогнать, ну и на мобилку больше всего ориентировался. Сегодня не взяли, завтра возьмут.

Vladimirus #:
Ну а че? Только яшке что ли бюджеты сливать. Гугл тоже самое выкатил, и пофигу что все авторизованы в аккаунтах, и там страна указана. Деньги то вот, надо брать.

Если бы гугл по стране в аккаунте рекламу отображал, тогда весь мир бы под Россией ползал.

Фигней страдаете какой то с этими VPN, берете русский прокси и нет рекламы и доступы ко всем резурсам есть кто не блокнул страну принудительно.

Next.js классная штука, а вообще если углубиться, то на чем угодно, единственно что сегодня без JS вообще не обойтись.

Ну а если с целью заработать, я б сегодня в сторону WEB вообще не смотрел, лучше смотреть в сторону разработки каких то приложений для мобилок, даже для того же ИИ думаю лучше сразу приложуху делать.  С сайтами один геморой, продвинуть сложно, зарабоать нереально, в той же развлекательной тематики нужно 100к+ в сутки чтобы нормально заработивать оплачивая серввера.

hosting_manager #:

Нью-Йорк

VPS (KVM) — E5-2696v4 (6 Core)     10 GB DDR4 / 960 GB SSD / 1 Gbps 10 TB - от $19 при оплате на 2 года

VPS (KVM) — E5-2696v4 (6 Core)     10 GB DDR4 / 3.84TB SSD / 1 Gbps 10 TB - от $29 при оплате на 2 года (в Амстердаме также доступна подобная конфигурация)

https://ua-hosting.company/servers/kvm/

Проблема в том что нужен в РФ, за бугром найти объемные бюджетные VPS, сервера, вообще не проблема, на том же хетзнере...

В РФ вообще все тухло, никто не может преложить ничего путнего, на именитых хостингах вообще трешак творится, на одном тупо диск прицепить на 1Tb стоит пости 12к в месяц (это вообще как????), даже обычный HDD 3к+. На Озоне нет таких сумм за покупку диска, а хостеры за месяц хотят железки окупать.

Как только вся хрень в мире закончится, потом ру хостеры будут плакать - куда же все подевались?!

Всего: 1560