> Такое изменение позволит нам соответствовать международным принципам применения директивы, чтобы и у российских, и у зарубежных вебмастеров не возникало трудностей при составлении файла robots.txt для разных поисковых систем
Не прошло и полгода, и они решили все-таки типа следовать международным стандартам
Нас терзают смутные сомнения, что Я и Г, как и раньше, будут по разному интерпретировать комбинации Allow/Disallow
Китайцы - гастарбайтеры мира и именно они начнут третью мировую. Ускорим? 😂
Просто некомпетентный
http://www.google.ru/search?q=inurl:%22ru%2Frobots.txt%22
Не надо по экрану ничего ездить и ходить
Кто девушек обижает - тот лох
Взяли последнюю базу + сами напарсили с Я по признакам (32к ресурсов) и прогнали нулёвый домен
Будем посмотреть
P.S.: И да, дети, "хрюмер" к делу отношения не имеет
Браузер будет получать информацию в заголовках, что это видеофайл
nui, не ясна задача и не ясен вопрос
Вы имеете отношения к этим хостингам? Вы знаете, что такое .htaccess?
Это проблема хостингов, не отдают адекватный Content-Type
Сохраняйте полученый "HTML" страница, меняйте расширение на flv
Не надо НЧ на 11-й странице проверять, берегите психику
Не тупим, речь о контенте