absolut, 404 выдавать иму ? или что ?
недоверяю robots.txt
сайт в профайле непричем.
есть сайт у него 20 поддоменов, так этот вшивый бот каждый божий день по 100-1000 старниц за порцию сьедает
сделал пока
if(stristr($HTTP_SERVER_VARS['HTTP_USER_AGENT'],'msnbot')){exit;}
if(stristr($HTTP_SERVER_VARS['HTTP_USER_AGENT'],'yahoo')){exit;}
readme, :)) нет это не этот сайт, e-i.ru удален
Так это из за чего происходит, я с таким никогда не сталкивался... я заметил что у многих сайтов моих знакомых тоже самое...
Это яндекс мтит чтото глабальное?
