Закрытие ненужных страниц

nvshop
На сайте с 28.03.2010
Offline
62
850

Есть 2 вопроса к знатокам SEO ;)

1) После установки ЧПУ на сайт случайно обнаружил, что Яшка и Гоша добавили в поиск не те страницы, что мне нужны. Оказалось, что страница с ЖК телевизорами доступна по двум адресам magazin.com/televizory/lcd-televizory/ и по magazin.com/lcd-televizory/

Тоже и произошло и с другими категориями. Причина - указание ссылок более короткого вида в сайтмапе.

Как лучше отвадить поисковики от страниц с коротким названием и подсунуть им ссылки с полным путём? Писать в роботс.тхт около 700 категорий не очень хочеться....

2) старые страницы товаров и категорий без ЧПУ:

magazin.com/index.php?categoryID=2159

...............................................................

magazin.com/index.php?productID=14698

сортировка:

magazin.com/index.php?searchstring=F&sort=Price&direction=DESC&offset=6048

Как правильно прописать в роботс правило для исключения товаров и категорий без ЧПУ и сортировку? Есть мысль: Disallow: /index.php?* поймут поисковики?

ИБП и АКБ для котла (http://ibpdlyakotla.com/)
Brand from Amber
На сайте с 18.08.2007
Offline
293
#1

1. Называется устранением дубликатов. Выбираете ту единственную страницу которую хотите оставить в выдаче, а со всех остальных дкбликатов отдаёте 301-ый редирект на эту страницу. Как Вы это реализуете - решать Вам.

2. Да.

Лучший способ понять что-то самому - объяснить это другому.
nvshop
На сайте с 28.03.2010
Offline
62
#2
Brand from Amber:
1. Называется устранением дубликатов. Выбираете ту единственную страницу которую хотите оставить в выдаче, а со всех остальных дкбликатов отдаёте 301-ый редирект на эту страницу.

magazin.com/lcd-televizory/ ->301 magazin.com/televizory/lcd-televizory/

по такому принципу прописать в роботс 700 категорий?

L
На сайте с 07.12.2007
Offline
351
#3
nvshop:
magazin.com/lcd-televizory/ ->301 magazin.com/televizory/lcd-televizory/
по такому принципу прописать в роботс 700 категорий?

Нет, конечно. robots - не резиновый и имеет ограниченный размер. В роботсе можно закрыть от индексации страницы по шаблону.

Редиректы делаются не в роботсе, а в .htaccess или в коде движка сайта.

Прописывать 700 строк в .htaccess - не комильфо (этот файл перечитывается при каждом обращении к сайту).

Но можно попробовать заюзать mod_rewrite для редиректа по шаблону.

nvshop
На сайте с 28.03.2010
Offline
62
#4

С редиректом не разобрался.

запретил 10страниц для пробы в роботсе и удалил их через панель вебмастера.

Сколько можно писать максимально строк в роботсе?

В роботсе можно закрыть от индексации страницы по шаблону.

если не затруднит, подробнее, пожалуйста, либо ссылочку.

Brand from Amber
На сайте с 18.08.2007
Offline
293
#5
nvshop:
если не затруднит, подробнее, пожалуйста,
User-agent: Yandex
Disallow: /cgi-bin/*.aspx # запрещает '/cgi-bin/example.aspx'
# и '/cgi-bin/private/test.aspx'
Disallow: /*private # запрещает не только '/private',
# но и '/cgi-bin/private'
nvshop:
либо ссылочку.

А Вы, батенька, лентяй - тут (как минимум) или тут (максимум).

nvshop
На сайте с 28.03.2010
Offline
62
#6
User-agent: Yandex
Disallow: /cgi-bin/*.aspx # запрещает '/cgi-bin/example.aspx'
# и '/cgi-bin/private/test.aspx'
Disallow: /*private # запрещает не только '/private',
# но и '/cgi-bin/private'

если про эти шаблоны, то их я знаю, на их основе делал Disallow: /index.php?* описано в посте выше.

А Вы, батенька, лентяй - тут (как минимум) или тут (максимум).

да нет, просто не видел смысла ручками забивать около 700 категорий.

Сгенерировал уже старый сайтмап с короткими ссылками, попробую прописать их в роботс. Нашел, что ограничение robots.txt не более 32 Кб. Запишу все туда, должно заработать.

otpad
На сайте с 20.02.2007
Offline
70
#7

Дабы не плодить похожие темы спрошу здесь.

Структура сайта Раздел - Категории (4 ш т) - Статьи.

Так вот одна и та же статья видна в разных категория к примеру

Категория1/Статья1 так вот Статья1 также видна в Категория2/Статья1.

Вариант разрешить эту проблему редирект 301 или есть другие способы?

P.S. яндекс показывает продублированный контен на 30%, гугл 98% и только Яху показывает правильное количество страниц.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий