Посещаемость упала не в 20 раз, а 3,5 раза http://xtool.ru/trast.php?site=rosbuilder.ru
На 1-ой линии рулите примерно так:.top-bar { background: none; font-family: 'dosis' sans-serif; margin: -40px 0 0 15px;
NOD32 матерится на ваш сайт
Неля250887 я пользуюсь таким:
User-agent:*
Crawl-delay: 2
User-agent: Unknown robot
Disallow: /
User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin
Disallow: /wp-login.php
Disallow: /wp-includes/
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /trackback/
Disallow: /tag/
Disallow: /feed/
Disallow: /comments/
Disallow: */comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?*
Disallow: /*?
Sitemap: http://сайт.com/sitemap.xml
User-agent: Yandex
Host: сайт.com
И все прекрасно индексируется
kimberlit Лучше бы по делу что-нибудь сказал, вместо того, чтобы
в чужом топике гадить. Или не похмелился?
http://help.yandex.ru/webmaster/?id=996567
kimberlit это вы мне минусы суете? Обоснуйте
Заходил, уже лишняя строка убрана. А вообще и без захода все понятно было.
Поисковый робот проиндексировал все страницы, которые были до написания запрета. Вы сами запретили ему ходит на страницы, он и перестал, по вашему желанию. Выполнил указание, прописанное в robots.txt
Однозначно, что вот этим Disallow: /page/,
Вы сами запретили роботу лазить по страницам
А это: Disallow: /page/ что такое?
