У искателей этой проблемы нет. Они делают другие запросы...
И поищите
site:searchengines.ru
site:https://searchengines.guru/
и вы подразумеваете, что этот текст и будет в выдаче по любым запросам?
В операторе site:текст-домена.влияет-на-сниппет // вам это что-то говорит?
Проверяйте
url:www.domen.ru*
или
url:domen.ru*
если хотите совсем избавиться от эффекта, упомянутого выше. Но это не значит, что вам обязательно покажется описалово.
Если это проблема, то решится она не ранее, чем изобретатель, запатентовавший оператор site, подаст на Яндекс в суд... какой-нибудь страны, где доля Яндекса вдруг станет > почти 0.
Ну напишите роботс, который исключит все возможные дубли типа:
http://www.joomla.org/announcements.html?start=51&гавно
http://www.joomla.org/announcements/general-news/5421-30-million.html
http://www.joomla.org/announcements/general-newS/5421-30-million.html
http://www.joomla.org/announcements/general-news/
http://www.joomla.org/announcements/general-news
http://www.joomla.org/announcements/general-neWs/
200 OK
http://www.1c-bitrix.ru/about/life/newS/
http://www.1c-bitrix.ru/about/life/news
http://www.1c-bitrix.ru/about/life/news/
http://www.1c-bitrix.ru/about/life/&
http://www.1c-bitrix.ru/about/life/
http://www.1c-bitrix.ru/about/life//
Вот в индексе, они это так и хотели?
Эту страницу продвигать или
http://www.1c-bitrix.ru/about/life/&08?
Можно будет сделать запрос на удаление /robots.txt из индэхса. Остальные страницы индексируются так же.
А вот если написать типа Disallow: /sitemap.xml
то в WMT и ЯВМ будет ругань, что-то там про запрет сайтмапа.
Оставлять Disallow: /sitemap.xml не пробовал.
А что такое актуальный индекс?
И покажите его тут... для любого документа.
А из <h4> не полюбили?
Не борется. Это явление зависит от запроса. В Гугле тоже.
Посмотрите, из чего сформирован заголовок сниппета и дочитайте абзац, он появился уже давно.
А кто будет проводить собеседование и принимать решение о приёме на работу? Вы же не специалисты. Может быть и для этого надо обратиться к специалисту?
А подрядчик вас пошлёт далеко (особенно, если кто-то попытается им руководить), и будет прав... договор уже подписан. И вам должны только то, что там написано (но не произвольную расшифровку этого... которая может оказаться в запоздавшем ТЗ).
ТС находится в удобном для ПС/конкурентов тупике, думая при этом, что сможет прилично сэкономить.
Давайте сформулируем проблему честнее:
Как индексировать/продвигать сайты, содержащие списки поисковых запросов? Не один-два-три запроса... а десятки и сотни.
Решать её надо не в рамках документа, а в рамках сайта (и можно именно в рамках сайта, а не группы сайтов — как с субдоменами).
Название форума к вашему видению не имеет отношения.
На apple и microsoft нужно сослаться слишком жирной сцылкой, чтобы появился шанс возникновения дубля. А у нового магазина с контеном ограниченной уникальности, находящегося на грани самой возможности индексации... лучше не добавлять всех тех, лишних для ПС возможностей, которые и создают говняные CMSки.
Это форум о поисковых системах ... для которых страница существует, если сервак отвечает 200.
Зачем же тогда с index.php лечили?
А по поводу всех остальных подобных дыр
http://tixcms.ru/news
http://tixcms.ru//news
http://tixcms.ru/news/
200 OK ... вместо 301 на единственно правильный урл.
давно любопытно, почему начинает отвечать 200 OK на любой регистр только /на/совсем/глубоко/зарЫтом/
http://tixcms.ru/addons/view/tixcms/neWs/
http://tixcms.ru/addons/view/tixcms/NewS/
http://tixcms.ru/addons/view/tixcMs/NewS/
А вот 500 http://tixcms.ru/addons/viEw/tixcms/news/
выводимое при этом сообщение будет полезно тем, кто специализируется на взломе?