Прятать нечего.
Запрос "кабель", урл не хочется светить. Могу почтой
Я тоже замечал не раз, что урл, в названии которого встречается ключевое слово, имеет привелигированное положение (на яндексе точно).
Ну да, в других тэгах этот текст тоже встречается. Значит, поставили на всякий случай :)
А зачем этот текст тогда торчит на странице?
Опять поиск не работает :(
А что такое RTFM?
А в robots.txt у меня запрет на индексацию всех страниц, УРЛ которых содержит сессию: Disallow: /имя_проги;jsessionid
Это ведь должно работать!
Выдается 200. А задумывалось вот что: при заходе робота даже с ID сессии все другие внутренние ссылки сессии не содержат. Робот должен собрать их и проиндексировать нормально, без сессий в УРЛ.
Конечно, и логи специальные веду только по роботам всяким.
Почти, только явский - jsessionid. По поводу выкинут - уже год сайт в сети, год его яндекс дрючит - не выкинули еще :). Так прикол-то в том, что я специально сделал так, чтобы при заходе яндекса и ему подобных они сессий не видели! Проверял, все работает. Так откуда же яндекс берет урлы с сессиями? Получается, что он их получает, обходя сайты как обычный пользователь...
М - это подстветчик
I - индексирующий