Как проверяли?
/ru/forum/676966
<html> <body onLoad="li()"> <div> <h1>статья</h1> <p>Тарам пам пам <span id="comm1"></span> пам пам <span id="comm2"></span> пам пам <span id="comm3"></span>. Всё.</p> <p>...</p> </div> <script type="text/javascript" src="index.js"></script> </body> </html>
index.js
function li(){ document.getElementById("comm1").innerHTML='<a title=\"Сами знаете какой" href=\"http:\/\/www.yandex.ru\/\">дебильный поисковик<\/a>'; document.getElementById("comm2").innerHTML='слово'; document.getElementById("comm3").innerHTML='не ищется'; }
robots.txt
User-Agent: * Disallow: /index.
В индексе. Ссылки крошки и навигации не ищутся.
Там не запросы. И не все. Трудно прочитать?
Не изменяется количество показов. А запросы это разные...
По куче урлов. Добавляйте в адресную строку &filter=0 для Гугля. &rd=0 для Яндекса.
Уник.контент должен быть доступен по единственному урлу. Если двиг делает его доступным по нескольким, то ПС начинает фильтровать... в итоге может зафильтроваться весь сайт.
Дубли. Дубли. И так в индексе лишнее...
А потом в Гугле. Может вообще убрать?
Представим себе, что на них вдруг перестали кликать...
::
ps сначала придумать то, как бот действовать просто не умеет, а потом счесть это тупиком.
А как?
Почему вы думаете, что они что-то подтверждают?
Мне пару месяцев назад ответили, что ихний бот получил такой-то роботс.тхт (запрещающий всё).
Вот пример реальной переписки 2010
В индексе. Сравните то, что видите в браузере с тем, что есть в исходном коде. Так можно прикрывать от ботов хоть навигацию, хоть дублирование всяких там футеров с копирайтами. А в реальном случае — боту показывается то, что ему и надо видеть, вроде бы (вопросы веры/правильности того, что именно надо показывать тут не рассматриваются).
Без &rd=0 | С &rd=0
это как бы слишком примитивно всё. УниКализаторы обходить давно научились.
Тут более интересное попадается, объясните попадание в выдачу текста без слов запроса... по таким краевым эффектам можно пытаться делать выводы про аннотирование.
Вот вообще экзотика. Disallow: /
/ru/forum/comment/9674710
Пока ПС культивируют собственную отсталость, многое удаётся скрывать от них обеих
JS-пример Бурундука.
XML-пример по мотивам Аяврика.
