Форум Практика оптимизации Любые вопросы от новичков по оптимизации

как правильно зпретить в robots.txt

S
На сайте с 07.03.2011
Offline
69
shinas
358

Здравствуйте. Коротко и по существу.

Был сайт на вордпресс, переехал на maxsite.

Новый движок создает дубли страниц, вот пример

/index.php/page/bla-bla-bla

/page/bla-bla-bla

/index.php/page/bla-bla-bla111

/page/bla-bla-bla111

/index.php/page/bla-bla-bla222

/page/bla-bla-bla222

и т.д. Уже наплодил кучу дублей.

Подскажите пожалуйста, как правильно запретить индексацию вот этого самого index.php в robots.txt ?

K
На сайте с 31.01.2001
Offline
737
Kost
#1

Например

Disallow: /index.php/

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
S
На сайте с 07.03.2011
Offline
69
shinas
#2

Я попробовал именно эту конструкцию вставить. Как итог - на следующий день трафик упал в 5! раз. Сразу же убрал - все вернулось.

kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#3
shinas:
Я попробовал именно эту конструкцию вставить. Как итог - на следующий день трафик упал в 5! раз. Сразу же убрал - все вернулось.

Вариант правильный. Реакции за сутки быть не может (тем более туда и обратно).

S
На сайте с 07.03.2011
Offline
69
shinas
#4

Спасибо за ответ. Тем не менее такое было... Хм.. странно.. Описанная ситуация случилась с трафиком от гугла. В сумме все-таки получилось 2 суток - сначала в минус, на вторые сутки в плюс.

Sasha Ivlev
На сайте с 16.08.2011
Offline
15
Sasha Ivlev
#5

в гугле апы просто гораздо чаще чем в яндексе вот поэтому так быстро и получилось. а вообще вам правильный пример показали

Kost:
Disallow: /index.php/

ну или можете каждый дубль вручную прописывать)

S
На сайте с 07.03.2011
Offline
69
shinas
#6

Спасибо за ответы. Все-таки сделал 301 редирект, т.к. пробовал вышеописанный способ и описал результат эксперимента)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий