Uniplace: Робот всегда настраивается на большинство сайтов для обеспечения компромиса между скоростью и нагрузкой
У сапы, полагаю, эта проблема куда острее стоит, но случаев, когда сапобот создавал бы такую нагрузку (не только со своими сайтами, но и вообще в принципе), что-то я не припоминаю.
Вопрос в подходе - не нужно за раз сайт обегать. Все страницы, имеющиеся на бирже (а не на сайте), рандомно распределяются и бота не видно и не слышно. И компромиссов не нужно - бот работает с максимальной скоростью, нагрузка на серверы не зашкаливает.
И да - пусть они представляются, чтобы было понятно, что за бот.
BralBine: Какая проблема существует на данный момент: На часах 00:00 очередного дня. Юзер регистрируется, заходит в вышеупомянутый раздел и создает топик формата "была - не была", в надежде угадать очередной апдейт.
Такое уже можно наблюдать второй день к ряду, однако такие случаи были замечены и ранее.
Вчера и сегодня, в сумме, было создано порядка 5-6 топиков: каждый "предсказывал" апдейт как и поисковой выдачи, так и параметра тИЦ.
А Вы сидите по ночам и всё это мониторите? Сочувствую.
поясните мне как нужно это делать правильно
Правильно или "в общем-то" или "вообще-то". :)
На эмоциях писал
Вас, видимо, редко штрафуют. Я к этому давно отношусь спокойно - да, бывают несправедливые, на мой взгляд, штрафы, но чего об стену-то биться?
От штрафов не умирают, не волнуйтесь. :)
В роботсе прописывать, говорите?
Вот у меня в роботсе:
А вот Ваш бот:
И так 3 часа.
Он у вас robots.txt не читает?
---------- Добавлено 18.10.2012 в 10:18 ----------
Там только одна строчка
Это старый код, новый скачай. :) А про то, как в старом сменить кодировку, я тут писал
может его пытают и под пытками он нажимает красные карточки
Нет. Львович очень стойкий, его не сломить. Вот если бы он не давал, это был бы повод задуматься… ;)
Львович прочитал весь топик сказал спасибо и не отписался
Ещё пару карточек выдал, так что всё в порядке, думаю. :)
разве это "реклама и спам"?!
Нет. Но "слезами горю не поможешь". Сейчас ещё 8 баллов получите. 😒
Робот всегда настраивается на большинство сайтов для обеспечения компромиса между скоростью и нагрузкой
У сапы, полагаю, эта проблема куда острее стоит, но случаев, когда сапобот создавал бы такую нагрузку (не только со своими сайтами, но и вообще в принципе), что-то я не припоминаю.
Вопрос в подходе - не нужно за раз сайт обегать. Все страницы, имеющиеся на бирже (а не на сайте), рандомно распределяются и бота не видно и не слышно. И компромиссов не нужно - бот работает с максимальной скоростью, нагрузка на серверы не зашкаливает.
И да - пусть они представляются, чтобы было понятно, что за бот.
Спросил, может у кого именно так и было
Именно так было у каждого, кто сменил 2-3 ноутбука. Но причины у всех разные.
Как вариант - перегрелся, если во время работы не вентилировался как следует (забился пылью, лежал на диване и т.д.).
Какая проблема существует на данный момент:
На часах 00:00 очередного дня. Юзер регистрируется, заходит в вышеупомянутый раздел и создает топик формата "была - не была", в надежде угадать очередной апдейт.
Такое уже можно наблюдать второй день к ряду, однако такие случаи были замечены и ранее.
Вчера и сегодня, в сумме, было создано порядка 5-6 топиков: каждый "предсказывал" апдейт как и поисковой выдачи, так и параметра тИЦ.
А Вы сидите по ночам и всё это мониторите? Сочувствую.
Я видел, что здесь его аккаунт забанен без права переписки.
Да это он сам такой статус поставил, думаю.