Все вопросы по robots.txt - 2

Уважаемый пациент, проходите мимо пожалуйста, если ничего сказать по теме. Троллить не надо! 🙅

пысы - на досуге почитайте - http://alaev.info/blog/post/3013., что бы не давать глупых советов.

Господи, ну откуда такие продукты реактора биомассы... Совет дан, и он единственный правильный. Но дурачкам из 12 года чтения все позволено (он, кстати, и тогда был неправ).

Подобная манера общения с Людьми свидетельствует об отсутствии интелекта, а посему прекращаю общение с подобным продуктом...

Да простят меня соконфетники за офтоп.

Ну про интеллект понятно - тут не соревноваться. Как и по seo-знаниям.

может выкинуть по причине "недостаточно качественная", но это практически любой страницы касаются со слабым контентом

Не выкинет. Всё равно что Вы закроете от индекса utm метки через Clean-param, судя по вашему описанию смысл ровно тот же.

А вообще для надежности стоит проверять такие вещи в ЯВМ в разделе Инструменты->Анализ robots.txt.

Там будут все ответы - красный стой, зеленый иди.

Привет всем!

Пара вопросов.

1. Есть роботс, а там строки:

Disallow: /bitrix/

.......

Allow: /bitrix/js

Не закроется ли "Allow: /bitrix/js"?

Что должно стоять выше в списке, если это имеет значение?

2. Как закрыть следующие параметры для индексации (disallow) в битриксе:

"show", "order", "name", "price" и "display"?

Эти слова появляются при листинге товаров в каталоге, а это вроде как неочень)

На всякий случай, мало ли кто-то не на шутку захочет вникнуть в вопрос и его решение)) Использую решения от Аспро, пытаюсь довести их до ума по рекомендациям для первоначальной внутренней оптимизации. Может сталкивались и там есть места, характерные именно для битриксовских решений от аспро, на которые стоит обратить особое внимание?

Заранее спасибо за ответ!

https://yandex.ru/support/webmaster/controlling-robot/robots-txt.html#allow-disallow

Да, прочитав предыдущие Ваши коменты в это теме, сначала почитал справку яндекса))) Именно поэтому решил задать уточняющие вопросы "Не закроется ли "Allow: /bitrix/js"? Что должно стоять выше в списке, если это имеет значение?" Хорошо, будем считать, что правильно так:

Allow: /bitrix/js

......

Disallow: /bitrix/

Во второй вопрос стоит внести уточнение, конечно, я почитал справку яндекса, но меня смущает, что помимо перечисленных мной параметров, в урлах появляются еще символы:

сайт/каталог/раздел-каталога/?sort=SHOWS&order=desc

сайт/каталог/раздел-каталога/?display=block

сайт/каталог/раздел-каталога/?display=list&sort=PRICE&order=desc

Правильно ли мыслю, что надо запилить строки типа:

Disallow: /?sort

Disallow: /?display

???

И сразу еще вопрос, если использую такой замут:

Disallow: /*?*

то все страницы с переменными после слеша, которые будут содержать вопросительный знак, не будут индексироваться ПС?

У меня из-за Disallow: /*?*, были траблы в Google. При проверке оптимизации для мобильных, выяснилось, что эта директива закрывала путь к файлу вида - /gfg?js , пришлось открывать папку по указанному адресу. При таком раскладе можно перекрыть путь к css файлам, нужным гуглу при открытии мобильной адаптивной версии сайта