Да, могу объяснить - у человека, задавшего вопрос переписал, а помог просто с тем, что структуру чуть подрихтовал, убрав лишние блоки (по моему мнению (оно может расходится (я и не претендую на правоту, просто пытаюсь помочь советом, пусть даже и неверным)))
http://www.dinews.ru/seo/
http://www.pr-cy.ru/
Здравствуйте, я хочу помочь вам подправить файл robots.txt. Надеюсь, что помог вам...
User-agent: YandexBlog
Disallow:
User-agent: *
Sitemap: http://site.ru/sitemap.xml.gz
Sitemap: http://site.ru/sitemap.xml
Allow: /wp-content/uploads
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?*
Disallow: /*?
Host: site.ru
1. Для этого есть сервисы статистики, например вот этот www.seolib.ru/
2. Смотря для чего играет. Если у вас говносайт для продажи ссылок, то здесь, скорее всего не посещаемость, а наличие пузомерок играет ключевую роль. Чем выше они, тем дороже сможете продавать. А если у вас на сайте контекстная реклама висит, то как вы понимаете, без посещаемости с нее нет толка.
А вы то сами, что думаете на счет посещаемости? Для чего делали сайт?
Еще и как применят, особенно если этот контент не из трех предложений...
У Википедии очень высокий траст, поэтому бороться с ней крайне сложно
Вот еще очень хороший онлайн-сервис для проверки текста на совпадения antiplagiat.ru
Значит не узнавайте у хостера, а напишите либо с www, либо без него в robots.txt. Если будете сомневаться как писать, то лучше проконсультируйтесь с авторами предыдущих двух ответов
Узнайте у своего хостера какой домен у вас основной site.ru или www.site.ru. В зависимости от этого в файле robots.txt пропишите host для Яндекса
User-agent: Yandex
Облако тегов служит исключительно для юзабилити и никакой раскрутки с помощью него не производят. Если есть желание, то можете запрятать его в noindex и nofollow... хотя, по-моему, никаких санкций со стороны поисковых систем быть не должно, т.к. это по сути всего-лишь "перелинковка" материалов сайта с разными анкорами, вот и все
