Dimamelnic

Рейтинг
44
Регистрация
17.01.2018
GuruSite24 #:

Ну если с подсети гугла / яндекса пришли, то все корректно. И не 70 ботов, а 70 коннектов к сайту. Могут быть и тысячи коннектов, и десятки тысяч. Зависит от того, какой объем страниц там у них на обходе.

Поисковики никто не банит. Банить нужно непрошенных ботов, серпстаты разные, ашрефсы и проч. Сканеры уязвимостей, поведенческих ботов, и далее по списку.


даже после блокировки всех ботов. нагрузка на сайт не спадает. все эти боты все так же заходят но им 200 ошибку выдает

Как их блокировать? если через cf бессмысленно 

GuruSite24 #:

Яндекса подтормаживают через вебмастер.
Только вопрос, зачем его с гуглом блокировать?

Всякие блокировки по всяким разным методичкам как правило и приводят к всякому разному результату.

по стате Cf посмотрел. там за сегодня 70 ботов от гугла. и 20 от яндекса.

они же не могут там много ботов на мой сайт посылать. сам яндекс с гуглом

Кто может помочь избавится от 

гуглбот
яндексбот 
петалбот и тд

В логах access у них HTTP/1.0" 200 

Запрещал им доступ через robots и через .htaccess

нагрузка на сайт сильная. кроме них заходят какие то не понятные страны. ставил всякие блокировки через cloudflare. нагрузка меньше не стала(
alaev #:

Из полезных ботов можно оставить Яндекс, Гугл, бинг и что-то там ещё.

А все остальное в бан. Всякие ahrefs, majestic и прочие.

за последние 3 дня вот эти боты заходят

"msnbot|Googlebot|PetalBot|YandexRenderResourcesBot|bingbot|AhrefsBot|YandexBot|MJ12bot|DotBot|AdsBot-Google|BLEXBot"

alaev #:

Из полезных ботов можно оставить Яндекс, Гугл, бинг и что-то там ещё.

А все остальное в бан. Всякие ahrefs, majestic и прочие.

за 20 минут зашло в районе 15 ботов
и 25 ботов гугла

это нормально? я только что не делал) запрещал и через роботс и через .htaccess
через что банить их? и почему так много ботов от гугла и яндекса 

Вопрос из начала темы. 

есть видос который упоминали. сделал все так же.

нагрузка на сайт не упала. в CF работа вроде идет за 15 минут где то  bad country 10
http 5
а полезные боты где то 50. это точно полезные? что то их много.

помогите как убрать нагрузку) и если убрать конкретно всех ботов что тогда будет? даже полезных. так как я вижу из яндекса ботов куча их ранее не было. а щас все боты мира у меня 

получается мне надо заблочить и яндекс и гугл? судя по айпи адресам лезет яндекс из рф. а рф у меня открыт
SAntone #:

Так возьмите у них же в другой локации или попросите поменять, та же Польша и Турция у них ест, Вы же заведомо взяли виртуалку для использования в Казахстане и пытаетесь её использовать по всему миру? Зачем спрашивается нужен был именно Казахстан а не Польша к примеру?

использование игровых серверов в разных частях мира. польша уже есть. перед тем как взять виртуалку я не знал что такие плохие услуги данный хост предоставляет.

перекинуть меня на другую локацию? судя по тому что написано, 1 гб скорость интернета. когда нажимаешь на Знак вопроса. так пишет чем выше тариф тем лучше скорость. и деньги они возвращают лишь из за не работы диска озу или процессора. что касаемо скорости они уже все продумали.
Эта тема создана с тем что люди по дольше думали чем брать тарифы там) может быть какой то тариф за 20 евро он и хороший. но не факт, Об этом не написано, Хочешь качественный канал Download или upload хотя бы 20 что ли. а не 200 кб

о том что написано "ВОзьми тариф выше и ты получишь канал мощнее..." но никто не знает на сколько. и что я сейчас должен делать? Мне в принципе без разницы уже. я могу этот кому то из желающих отдать. пусть используют мне это говно уже не нужно 

totamon #:
ну вы хоть сайт или страницу, закиньте, проверьте с разных локаций тем же пинг-админом, не знаю зачем вы ориентируетесь на скорость в фтп клиенте? у вас хобби такое - наблюдать за полоской загрузки?) впс под что именно брали да еще в Казахстане?

у них даже есть looking glass 10-100-1000 скачивание файла. сначала скачивание нормальное потом качает долго... там не только низкая загрузка но еще и скачивание

брал я для игровых серверов. но такое чудо как pq hosting такое не потянет, в 5 локациях у меня есть vps ищу варианты не дорогие. у меня нет опыта ориентироваться с помощью чего то еще,  vps нормальная она не будет сначала закачивать с 7 мб а потом опускаться до 200кб или иногда держаться на 1.3мб

сейчас когда я пишу сюда. решил еще раз файл закинуть сначала показывало 13мб. потом до 250кб упало. там рандом какой то...  остановил файл... закинул еще раз. уже показывает сначала 1.6 мб потом до 160кб упал

мне нужна как и закачка файлов так и скачивание что бы была стабильность. но тут такого нет

Ilya74 #:

Не секрет, что каналы из Казахстана в мир в сравнении с Россией плохие. А в вашем случае ещё возможно и перегруженные, поэтому скорость прыгает с нормальной до очень низкой.

Потестируйте крупных казахстанских хостеров, таких как ps.kz, например. Возможно, будет получше. И не сказать, чтобы там дорого, что-то в районе 350-400 руб. за минималку.

На Gcore взял. у меня там есть турецкий и польский vps так как проблем не было) из за того что проблемно оплачивать, я сначала решил не брать там, а взять на pq hosting из за доступности рф оплаты.  

ну сейчас я буду пробовать на gcore но там у меня никогда проблем не было.

Ilya74 #:

В теории их поддержка права, скорость зависит от очень многих факторов. На практике Интернет в Казахстане очень медленный и дорогой в сравнении с, например, соседней Россией. Большинство хостинг-провайдеров Казахстана до сих пор предлагают максимум 100 мегабит, тогда как в России уже давно эта цифра кажется чем-то скромным.

Попробуйте замерить скорость внутри Казахстана. Либо даже внутри их ДЦ через тестовый файл looking glass. Если и до looking glass всё будет очень грустно, то значит перегружен сам канал сервера, как следствие - пинать нужно поддержку. Если же внутри ДЦ или внутри Казахстана всё нормально, а скорость низкая только при доступен из других стран, то, увы... Низкие скорости в Казахстане - не новость.

внутри сети все хорошо... если качать из других стран скорость очень медленная. я понимаю что в казахстане все дорого.  Думал возьму вкусный тариф за 300р. а тут вон как

проще было брать у казахского хостинга за 250 рублей. там канал 10мб... и выдавало бы оно мне меньше. но не 200кб точно... и не 1.3мб
поддержка может быть и права. но такую мизерную скорость я честно не ожидал.

12
Всего: 17