Работающий метод - контент, который нужно скрыть, подгружаем из внешнего JS-файла, а саму директорию с JS-файлом запираем в robots.txt от индексирования.
Подключите, как советовали, Google Webmaster tools, смотрите что там (сразу не увидите, Гугль постепенно туда информацию загружает).
Загрузите карту сайта, создайте robots.txt, объясните боту куда ходить, а куда - нет.
Смотрите логи, что делает бот на сайте. Включите в своей CMS встроенную статистику посещений, если есть.
Кстати, для Рамблера важно, указан сайт с www или без. Можно получить как все, так и ничего.
Пишем хозяевам того "блога", гневно требуем статью убрать. Грозимся судом и т.п.
Миф, если грамотно конфигурировать URLы в robots.txt. Иначе можно получить практически сложно контролируемую ссылочную структуру.
А бот к вам на него ходит? Проверьте по логам. Если нет - нужно всеми силами загонять его к себе на сайт, если ходит - смотрим, как ходит и чем интересуется. Если не включена встроенная статистика Joomla - включите, будет много интересного.
Подключите Яндекс Вебмастер и посмотрите, что он там показывает.
В коде смутило вот это:
Обычно не влияет, но может и влиять. Поменяйте на:
или
Гугль, вроде, не сильно разборчив в качестве ссылок, и хавает подчас полное Г.
По моим наблюдениям, полностью обновляются в кеше поисковика страницы для небольшого сайта-визитки страниц в 10 за пару недель, не раньше.
Сами по себе мета-теги не дадут хорошего места в поиске, нужно чтобы на странице присутствовал контент, содержащий желаемые ключевые слова, однако с ними лучше, чем без них. Кроме этого, на базе мета-тега description зачастую формируется описание ссылки на сайт при выдаче.
По поводу того, как писать мета-теги, писалось уже много. Кратко опишу основные действия.
Meta-тег description, желательно, должен быть не длиннее 200-256 символов. При этом надо рассчитать его размер так, чтобы нужный текст мог отобразится полностью в выдаче поисковой машины. Текст должен содержать все основные продвигаемые ключевые фразы, в порядке убывания важности, но сохранять при этом читабельность для людей. Ведь по этому тексту они будут решать, соответствует ли их запросам ваш сайт. Желательно добавить то, что может привлечь посетителя. Если страницы сайта продвигаются по разным запросам, нужно иметь уникализированный контент в метатегах.
Поле метаключей должно содержать в себе все основные ключевые слова, но не более 256 знаков. Запятые в качестве разделителей не обязательны. Более важные ключевики должны стоять перед менее важными. Избегайте повторения ключевиков. Используйте ключевики, релевантные теме вашего сайта (иначе можно схлопотать ненароком от ПС).
Собственно, такой минимум.
Может отнестись как положительно, так и отрицательно, смотря что и как поменяете. Учтите, что бот сканирует не весь сайт за раз, а по отдельным страницам, интервал между проверками зависит от разных параметров, например от глубины вложенности. Между проверками отдельных страниц могу пройти дни и даже недели. Так что смело меняйте все сразу.
Я только что попробовал, убрать из первой десятки сайт с битым контентом. Посмотрим, что будет.
