редактирование robots.txt

E
На сайте с 25.05.2012
Offline
0
465

Добрый день, обсуждали с коллегами, к единому мнению не пришли. Имеется сайт на Битриксе с кривоватым robots.txt (не выключены запросы в URL, разделы /search и /auth - если кто на битриксе работал, то это точно знает). результатом стало то, что с точки зрения роботов эти разделы занимают 80% всего сайта, что пагубно влияет на формирование в ПС его структуры и т.д. Ресурс не слишком молодой, посещаемость не очень высокая но есть.

Вопрос - что будет с выдачей ПС, если эти разделы в роботсе запретить. Если нужно, отвечу на вопросы...

kimberlit
На сайте с 13.03.2007
Offline
370
#1
estidi:
Вопрос - что будет с выдачей ПС, если эти разделы в роботсе запретить.

С выдачей ничего не будет. На эти страницы есть посетители?

E
На сайте с 25.05.2012
Offline
0
#2

нет слава богу...

kimberlit
На сайте с 13.03.2007
Offline
370
#3

А закрыть желательно.

E
На сайте с 25.05.2012
Offline
0
#4

спасибо, закрою. да сам был в шоке :) ужас в том, что в битриксе еще и поиск рекурсивный :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий