Disallow: /?ID= - это для того чтобы не индесировались страницы старого сайта (до 2003 года) там были ссылка вида /?ID=, по ним постоянно пытаются роботы стучаться.
Версии для печати нет.
С ТИЦ не знаю вроде 3400. Я привел ответ яндекса, читая который правда ничего не поймешь.
Сегодня поставлю 304 ответ на if_modify, может в будущем хотя бы поможет.
а как отлечить обычного робота от быстрого?
они же врое бы одинаковый рефер имеют..
Ответ яндекса
Странный несколько ответ, зачем мне смотреть на индексацию всего домена, если выпал отдельный сайт с WWW который принадлежит основному сайту.
Все остальные поддомены это пару мелких сайтов, отличных от главного... Поддомены кстати с индекса не выпали.
Вобщем исходя из ответа Платон (s) не признали даже наличие проблемы.
http://webmaster.yandex.ru/faq.xml?id=502475#howtohelp - тут все прекрасно конечно,
в robots.txt я давно по возможности все лишнее запихал, а вот 304 ответ хрен на битриксе настроишь..
Вообще у кого нибуть возникали проблемы из за 304 ответа? Неужели это так важно...
А что это за такой физический процесс и в чем может быть его причина?
И за какие нарушения могут исключить тогда весь сайт из индекса?
Ну не считая совсем явных - скрытый текст и прочую ерунду.
The WishMaster
отправил в личку.
какой качественный дизайн за 5$ может быть?? я блин за 1500$ найти не могу никого ктобы с задачей справился... Это в пеинтбраше наверное за 5$ рисуют.
Tor тоже фильтруется?
Сейчас Tor многие используют для безопасности, а посути это тот же анонимный прокси.
Ну быстро робот давно существует. Мой сайт тоже постоянно индексируется и информация в выдаче появляется. Вопрос в том что алгоритм выдачи быстро роботом и обычным сильно отличаются.
Задача яндекса не избавится от оптимизаторов, а сделать так чтобы оптимизаторы зарабатывали меньше денег, так как чем меньше денег дадут оптимизатору, тем больше получит яндекс при одинаковых бюджетах на поисковики. Главное чтобы при этом релевантность не страдала, чего и пытается яндекс не очень успешно решать в последнее время.
Смотря для кого :)
По мойму при любом изменении алгоритма недовольных оптимизаторов всегда будет больше, чем довольных :)
