длина текста без пробелов на сайте - 1077 символов, т.е. нельзя сказать что текста там нет - нельзя.
возрастной домен - это хорошо для яндекса
в общем, не вижу причин, чтобы подобный сайт не висел в топе. как по мне, так побольше бы таких сайтов в топ - все лучше, чем полотно seo текста, который все равно никто не читает
На дубли я проверила сайт программулиной, так что дублей и внутренних ссылок точно нет
не встречал программулин, которым можно всерьез доверять в этом вопросе. Тем более, что ссылки могли быть когда, проиндексироваться, и, после снятия с сайта, продолжать сидеть в индексе.
дубли надо проверять, практически руками вбивая куски текста с сайта в яндекс, просматривая полный список страниц на сайте, в том числе и непроиндексированных.
я все же также склонен считать что вы что-то упустили.
Lusi: Так id-шные страницы закрыты же от индексации поисковиками
Судя по приведенному robots - не закрыты.
Lusi: robots.txt составлен по рекомендациям для движка модх
А это, поверьте, вообще ничего не значит. Каждая вторая CMS пишет, что она seo-оптимизирована, хотя на деле там никакой оптимизацией и не пахнет. То, что у MODx большие проблемы с дублями - не раз испытал на своем опыте.
это вариант, который опирается на существующий роботс на сайте - нет времени изучать сайт, чтобы проверять, все ли правила нужны там.
я просто сделал вариант, который с высокой степенью вероятности не закроет лишнего, более корректен чем изначальный роботс на сайте ТСа, и решит проблему, с которой ТС столкнулся
deasel,
работает? добавьте сразу после RewriteEngine On
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteCond %{REQUEST_FILENAME} !-l
RewriteCond %{REQUEST_URI} !/$
RewriteRule ^(.*)$ http://%{HTTP_HOST}/$1/ [R=301,L]
если нет, сделайте с помощью php (конечно, если у вас php))
что-то вроде такого:
if (!strpos($_SERVER['REQUEST_URI'],'.'))
{
if (substr($_SERVER['REQUEST_URI'],strlen($_SERVER['REQUEST_URI'])-1)!='/')
{
$url = $_SERVER['REQUEST_URI'].'/';
header("HTTP/1.1 301 Moved Permanently");
header("Location: http://".$_SERVER['HTTP_HOST']."$url");
die();
}
}
длина текста без пробелов на сайте - 1077 символов, т.е. нельзя сказать что текста там нет - нельзя.
возрастной домен - это хорошо для яндекса
в общем, не вижу причин, чтобы подобный сайт не висел в топе. как по мне, так побольше бы таких сайтов в топ - все лучше, чем полотно seo текста, который все равно никто не читает
безусловно, банят за такое не всех и не всегда. но риск на санкции появляется
невидимый контент влечет за собой санкции с незапамятных времен.
все что является скроллингом, или выглядит как скроллинг, влечет пессимизацию также довольно давно
не встречал программулин, которым можно всерьез доверять в этом вопросе. Тем более, что ссылки могли быть когда, проиндексироваться, и, после снятия с сайта, продолжать сидеть в индексе.
дубли надо проверять, практически руками вбивая куски текста с сайта в яндекс, просматривая полный список страниц на сайте, в том числе и непроиндексированных.
я все же также склонен считать что вы что-то упустили.
Так id-шные страницы закрыты же от индексации поисковиками
Судя по приведенному robots - не закрыты.
robots.txt составлен по рекомендациям для движка модх
А это, поверьте, вообще ничего не значит. Каждая вторая CMS пишет, что она seo-оптимизирована, хотя на деле там никакой оптимизацией и не пахнет. То, что у MODx большие проблемы с дублями - не раз испытал на своем опыте.
поискать в коде страницы "<!-- Yandex.Metrika -->" :)
покажите роботс (сотрите хост, если он есть).
на самом сайте ссылки на эти дубли присутствуют? простой ответ "нет" тут недостаточен, надо убедиться точно, прогнав сайт, например, с помощью xenu
Kost,
Все верно, но без детального рассмотрения сайта - опасная конструкция.
Неизвестно, как обрабатывают поисковые системы одинаковые URLs с разными регистрами букв (точнее, известно, что это проблемный момент часто).
Исходя из этого, ваш вариант сокращения может закрыть:
/index.php?id=1&more=yes
и подобные. Именно поэтому я сделал две строки, а не из любви к большому robots :)
это вариант, который опирается на существующий роботс на сайте - нет времени изучать сайт, чтобы проверять, все ли правила нужны там.
я просто сделал вариант, который с высокой степенью вероятности не закроет лишнего, более корректен чем изначальный роботс на сайте ТСа, и решит проблему, с которой ТС столкнулся
User-agent: Yandex
Disallow: /*?page=shop.browse&category_id=1/
Disallow: /*?page=shop.ask*/
Disallow: /*OrderBy=
Disallow: /*OrderTo=
Disallow: /*?Re=
Disallow: /*&Re=
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Host: atput.ru
User-agent: Googlebot
Disallow: /*?page=shop.browse&category_id=1/
Disallow: /*?page=shop.ask*/
Disallow: /*OrderBy=
Disallow: /*OrderTo=
Disallow: /*?Re=
Disallow: /*&Re=
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/