Форум Практика оптимизации Частные вопросы - ранжирование, индексация, бан

Неправильный robots.txt?

B
На сайте с 12.08.2011
Offline
54
baturdem
525

Добрый день. Возникла дилемма.. Прошу помощи.

Был сайт на Joomla. Почти 2 месяца назад запустили обновленную версию на Drupal.

Были изменены url

с .../products/mikrovolnovye-pechi/...

на .../mikrovolnovye-pechi/... аналогично по всем категориям.

Настроены редиректы.

За этот немалый уже период новый сайт так и не проиндексировался нормально.

Вот, что по сей день видим в выдаче по продуктовым запросам:

http://prntscr.com/fggw22

В robots.txt стоит Disallow: /*products

Может ли это быть причиной "непроиндексированности" нового сайта или же нужно просто подождать?

сайт о монетах (http://dema.com.ua/)
W
На сайте с 08.02.2017
Offline
169
wicker
#1

baturdem, все логично, раз вы закрыли страницы, которые еще не выпали из индекса. достаточно было прописать у старых страниц тег canonical, сделать редиректы и ждать.

Комплексный аудит ИМ. Формирование УТП, анализ юзабилити, каналов продвижения. Контекстная реклама, настройка систем аналитики. Консультация - бесплатно, в ЛС
B
На сайте с 12.08.2011
Offline
54
baturdem
#2
wicker:
baturdem, все логично, раз вы закрыли страницы, которые еще не выпали из индекса. достаточно было прописать у старых страниц тег canonical, сделать редиректы и ждать.

Как быть теперь? Править robots (удалить Disallow: /*products) или все же ждать?

DX
На сайте с 20.02.2013
Offline
60
dmitriy_xom
#3
baturdem:
Как быть теперь? Править robots (удалить Disallow: /*products) или все же ждать?

а зачем Вы вообще закрывали в robots.txt? Вы сами написали "Настроены редиректы." Если 301 корректно работает (проверьте ответы заголовков сервера), все бы старый норм переклеелись на новые, без закрытия... 1. проверьте правильность работы редиректов 2. откройте доступ для бота 3. ждите по переиндекс пройдет

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий