Настройка robots.txt сайта на движке WebAsyst Shop-Script

S
На сайте с 28.05.2012
Offline
38
4394

Настройка robots.txt сайт на движке WebAsyst Shop-Script

Вот сам фаил robots.txt волнует один вопрос.

==============

User-agent: *

Disallow: /shop/

Disallow: /auth/

Disallow: /cart/

Disallow: /checkout/

Disallow: /feedback/

Disallow: /installer/

Disallow: /published/wbsadmin/

Disallow: /login/

Disallow: /logout/

Disallow: /myaccount/

Disallow: /order_status/

Disallow: /published/SC/html/scripts/

Disallow: /register/

Disallow: /remind_password/

Disallow: /*view=*

Disallow: /*/reviews/

Disallow: /vkontakte/

Disallow: /facebook/

Disallow: /order_history/

Disallow: /print_form/

Disallow: /*save_voting_results=yes*

Disallow: /category/*/offset*

User-Agent: Yandex

Disallow: /shop/

Disallow: /auth/

Disallow: /cart/

Disallow: /checkout/

Disallow: /feedback/

Disallow: /installer/

Disallow: /published/wbsadmin/

Disallow: /login/

Disallow: /logout/

Disallow: /myaccount/

Disallow: /order_status/

Disallow: /published/SC/html/scripts/

Disallow: /register/

Disallow: /remind_password/

Disallow: /*view=*

Disallow: /*/reviews/

Disallow: /vkontakte/

Disallow: /facebook/

Disallow: /order_history/

Disallow: /print_form/

Disallow: /*save_voting_results=yes*

Disallow: /category/*/offset*

Host: www.___.ru

Sitemap: http://www.___.ru/sitemap.php

==============

Выделенные строчки:

Disallow: /category/*/offset* будут ли они про индексированы или нет яндексом страницы с товарами. Или они как раз закрыты от индексирования?

Просто пути к товарам с этим же именем вложения ..Или мне стереть эту строку чтоб все нормально индексировалось. Не пойму?

Например: Путь на страницы с товарами.

http://www.___.ru/category/907/ или http://www.___.ru/category/795/

Всем спасибо!

AS
На сайте с 09.03.2012
Offline
49
#1

если правильно понял, то http://www.___.ru/category/795/ - будет

а http://www.___.ru/category/795/offset - не будет

...
S
На сайте с 28.05.2012
Offline
38
#2

То есть это строка Disallow: /category/*/offset* не мешает индексированию путей. Не закрывает эти пути?

http://www.___.ru/category/907/ или http://www.___.ru/category/795/

T2
На сайте с 04.02.2009
Offline
54
#3

cудя по всему это запрет на индексацию всех страниц категории товаров, кроме первой.

с точки зрения удаления дублирующего контента это конечно хорошо (например описание категории), а вот точто на этих страницах есть еще и товар, это плохо.

возможно в этом случае оптимальный вариант - или выводить весь список товаров на одной странице, или выводить описание категории только на первой странице. Последний вариант реализуется довольно просто, изменив три строчки

http://baza.vn.ua/ (http://baza.vn.ua/) Бытовая техника, отопление, хозтовары

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий