Подскажите с составлением robots.txt

[mAveRik]
На сайте с 09.11.2006
Offline
124
598

Здравствуйте, возник небольшой вопрос при составление robots.txt:

Имеется категории товаров формата /index.php?module=catalog&catid=id

При переходе на любую из подобных категорий, на странице появляются ссылки на конкретные товары формата /index.php?module=catalog&op=gooddescr&goodid=id

Так вот сам вопрос, если я закрываю подобную категорию, будут ли индексироваться сами товары?

Или их тоже необходимо закрывать вручную?

Продвигаю сайты, консультирую, 7 лет опыта, двигал крупные ecommerce (/ru/forum/994817)
VoV@
На сайте с 22.09.2007
Offline
196
#1

Если робот каким-то путём сможет до них добраться (перелинковка между товарами, внешние ссылки на страницы с товарами, карта сайта и т.п.), то да проиндексирует.

ЗЫ Если хотите закрыть всё, что ниже уровня категорий, закрывайте по параметру: module=catalog.

⭐ Разработка Андроид-приложений (Xamarin C#). ⭐ Разработка ASP.NET (WebForms, MVC, WebAPI, Core). ⭐ Цой жив!
[mAveRik]
На сайте с 09.11.2006
Offline
124
#2
VoV@:
ЗЫ Если хотите закрыть всё, что ниже уровня категорий, закрывайте по параметру: module=catalog.

В том то и проблема, что надо закрыть часть товаров, ок. 4000... Перспектива закрывать все это руками меня "немного" удручает :)

M1
На сайте с 09.12.2010
Offline
4
#3

Конечно вручную перебирать 4000 товаров никому не хочется, а другого выхода нет. Обратись за помощью к программистам, может скриптик тебе навояют.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий