Евгений Молдовану

Евгений Молдовану
Рейтинг
697
Регистрация
02.07.2008
Должность
Senior seo специалист
Bukvarix:
вы недовольны тем, что при использовании бесплатного API вы можете получить 429 ошибку.

Не могу, а 100 % получаю, а далее бан. И это не зависит от задержки при обращении к сервису.

Если у вас завелось такое количество халявщиков, которые круглосуточно насилуют ваш сервер, то я вижу два выхода

1) Купить лучше оборудование, улучшить скорость работы API - смотреть в сторону High Load, переписать сервер на чем то более быстром (тот же GO к примеру).

2) Ввести системы идентификации на бесплатном тарифе помимо IP. Отловить тех, кто делает 10-100К запросов и насилует ваш сервер. Добровольно-принудительно перевести их на другие тарифы. Очевидно - если они парсят такое количество данных= они их перепродают в своих проектах.

Bukvarix:
Для нас бот - это программа или сервис, которая автоматически

Доступ к API всегда АВТОМАТИЧЕСКИЙ. Для этого и делают API = чтобы не насиловали основной интерфейс и не грабили инфу, создавая нагрузку.

Если мыслить вашими терминами - я тоже бот, а моя программа ДОСС атака для вас.

semur123, чем эта тема не понравилась? /ru/forum/1020125

Bukvarix:
И именно боты создают большую часть нагрузки

Боты которые работают по API ? Что за боты такие ?

Bukvarix:
Если после паузы ошибка 429 осталась, то нужно увеличить время паузы. Если паузы не делать и постоянно "долбить" сервер - то IP попадет в долгосрочный бан.

Я еще раз пишу - я тестил с задержкой 3 и 5 секунд парсинг. Заканчивается все это баном. И из бана уже выйти нельзя - даже если подождать 10 минут.

Ваше решение

Bukvarix:
Если после паузы ошибка 429 осталась, то нужно увеличить время паузы.

Не работает = потому что уже бан.

Bukvarix:
Напишите нам в личку IP, с которого идут запросы - если он в списке забаненых, то мы уберем IP

Мне жалуются пользователи на то что получают эту ошибку. Я решил проверить проблему = убедился в ней. Какой мне толк с того что вы вытащите мой IP из бани? У других от этого не перестанет банить IP.

NCom:
Она показывается пользователям всегда.

В принципе это можно настроить чтобы показывалось 1 раз.

mvp-maker:
Смотрите, тут идея сервиса не в том чтобы SEO-аудиты делать

Так я о том же. Но тут вы должны понять что отчеты по SEO у вас уже потеряны, не потяните по конкуренции.

mvp-maker:
Вы можете сделать любой шаблон, например, аудит юзабилити сайта, или аудит рекламной кампании в ВК

Ну тогда логичнее искать именно эту аудиторию и у нее спрашивать - удобно им или нет.

Bukvarix:
Если после паузы ошибка 429 осталась, то нужно увеличить время паузы.

Вы читали что я написал? Я о бане.

Bukvarix:
текущей нагрузки на сервер

Запросы в 6 утра были, какие нагрузки?

Bukvarix:
с какого IP идет запрос

Не прокси

Bukvarix:
Поэтому при получении 429 ошибки нужно сделать паузу перед следующим запросом.

Я еще раз вам пишу - делал по 10 минут задержку - все равно 429.

Или 10 минут это мало?

Мне не важно с какой задержкой получать результат - главное его получать. А то похоже на то что специально вставляются палки в колеса ради стимулирования перехода на платный тариф. Но простите - у меня софт бесплатный. Неоткуда брать бабки.

drupaler, какие действия? Юридические? Если он не дурак выкрутится.

burunduk:
попробуй запускать её после загрузки страницы

нужно решение :)

Тоже о этом давно думал. Спецы по JS есть?

Васо Вчеразаши:
пролистываешь до фото и порой оно подтормаживает, грузится.

Лучше чтобы фото грузилось при прокрутке чем не работала прокрутка из-за подгрузки большого количества фото.

Всего: 9953