вот так и знал : в индексе
www.site.ru/index.html?page=316290295 · 25 КБ
попробую "лечить":
User-Agent: Yandex
Disallow: /?
Disallow: /index.html?
Disallow: /print/
блин,извинияюсь что не в теме,но хочется спросить,так сколько человек с нск в сео? )
Jackyk, точно,поспешил,нада для всех....а нет страниц таких нет для людей,для роботов они есть ибо отдают 200
это либо сайты более мелких, локальных поисковых систем, либо просто достаточно популярные сайты определенной тематики, которые получают определенный процент за каждого посетителя, который переходит на сайт рекламодателя.
Raskrutchik,ну может только "Китайская собака разбила машину во время обучения вождению" на 10 месте ))),а так нормально ,"всё в тему"
<script language="JavaScript" type="text/javascript">
if(top.location.href == self.location.href) window.location.href = "index.html";
</script>
блин запутался совсем :(...структура роботс такая правильная или нет(тоже нада запретить индексацию страниц вида www.site.ru/index.html?page=12312312313 ибо таких тсраниц вообще нет)
User-agent: *
Disallow: /forum/cashe/
Disallow: /forum/profile
Disallow: /forum/online
Disallow: /forum/userlist
Disallow: /forum/post
Disallow: /forum/edit
Disallow: /forum/moderate
Disallow: /forum/search
Disallow: /forum/register
Disallow: /forum/misc
Disallow: /forum/login
Disallow: /forum/config
Disallow: /forum/delete
Disallow: /forum/admin
User-agent:Yandex
почитайте про эргономику,"мобильность" и поведение пользователей...ну это в том случае что вы для человеков писать собрались
http://www.yandex.ru/yandsearch?rpt=rad&text=%E4%EE%EC%E5%ED%ED%FB%E5+%E7%EE%ED%FB
первая ссылка
по умолчанию серп состоит из 10 мест,11 место первое на второй странице.может в этом дело