FAQ новичку

Pandora, спасибо за ответы. дело в том, что прочитал очень много разных тем, форумов, блогов и т.п., актуальность всех полученных сведений разнится, поэтому и возникли вопросы непонятки.

На некоторых моих дорах гуляет такой робот (?):

93.80.88.86 - - [05/Jan/2010:02:39:39 +0300] "GET /img/30000000.jpg HTTP/1.1" 200 10902 "http://dorurl" "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; Trident/4.0; GTB6.3; MRSPUTNIK 2, 1, 0, 4 SW; MRA 5.5 (build 02842); SLCC2; .NET CLR 2.0.50727; Media Center PC 6.0; Tablet PC 2.0; .NET CLR 3.5.30729; .NET CLR 3.0.30729; InfoPath.2; OfficeLiveConnector.1.4; OfficeLivePatch.1.3)"

87.117.35.11 - - [03/Jan/2010:02:43:45 +0300] "GET /img/footer00.jpg HTTP/1.1" 200 16443 "http://dorurl" "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; GTB6.3; MRSPUTNIK 2, 1, 0, 4 SW; MRA 5.5 (build 02842); .NET CLR 1.1.4322; .NET CLR 2.0.50727; .NET CLR 3.0.4506.2152; .NET CLR 3.5.30729)"

Логи разрастаются до гигантских размеров, IP разные, общее только MRSPUTNIK - что это за чудо-фигня? Как закрыться от этого?

cancel, бань нафиг этого бота

93.80.88.86

inetnum: 93.80.0.0 - 93.80.255.255

netname: CORBINA-BROADBAND

descr: Broadband Customers in Moscow

country: RU

role: CORBINA TELECOM Network Operations

address: CORBINA TELECOM/Internet Network Operations

address: Ryazanskii pr. 30/15

address: Moscow, Russia

address: 109428

phone: +7 495 728 4000

fax-no: +7 495 728 4001

87.117.35.11

inetnum: 87.117.34.0 - 87.117.35.255

netname: ROSTOV-DONPAC-NET

descr: Network of Division of JSC "UTK" "Rostovelectrosviaz"

person: Vladimir A. Sherstnev

address: JSC "UTK" "Rostovelectrosviaz"

address: Bratskai 47

address: Rostov-on-Don, Rostov region, 344000

address: Russian Federation

phone: +7 8632 619163

nic-hdl: VAS102-RIPE

e-mail: wert@donpac.ru

больше на парсеры похоже.

93.80.88.86 - - [05/Jan/2010:02:39:39 +0300] "GET /img/30000000.jpg HTTP/1.1" 200 10902 "http://dorurl" "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; Trident/4.0; GTB6.3; MRSPUTNIK 2, 1, 0, 4 SW; MRA 5.5 (build 02842); SLCC2; .NET CLR 2.0.50727; Media Center PC 6.0; Tablet PC 2.0; .NET CLR 3.5.30729; .NET CLR 3.0.30729; InfoPath.2; OfficeLiveConnector.1.4; OfficeLivePatch.1.3)"

87.117.35.11 - - [03/Jan/2010:02:43:45 +0300] "GET /img/footer00.jpg HTTP/1.1" 200 16443 "http://dorurl" "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0; GTB6.3; MRSPUTNIK 2, 1, 0, 4 SW; MRA 5.5 (build 02842); .NET CLR 1.1.4322; .NET CLR 2.0.50727; .NET CLR 3.0.4506.2152; .NET CLR 3.5.30729)"

Это Спутник@Mail.Ru – Быстрый поиск прямо из окна браузера!

Я так понимаю, надо через .htaccess? Такая запись поможет?

   SetEnvIfNoCase User-Agent "MRSPUTNIK" bad_bot
   Order Allow,Deny
   Allow from all
   Deny from env=bad_bot

cancel добавил 10.01.2010 в 00:01

т.е. это бот нового поискового движка mail.ru

я думал вы из-за IP переживаете.

чем вас юзер-агенты со спутником пугают?

4arger добавил 10.01.2010 в 00:06

нет)) это браузеры с установленным спутником.

😂 все разобрался - на этом хостинге логи кумулятивные в 1 файле, я думал посуточные и увидев размер стал паниковать (учитывая что трафа с них пока почти нет) :D

Чем напарсить английских кеев под гугл?

http://seoboxer.ru/?p=1263221991#post