Неправильный robots.txt?

B

54

baturdem

6 июня 2017, 09:55

543

Добрый день. Возникла дилемма.. Прошу помощи.

Был сайт на Joomla. Почти 2 месяца назад запустили обновленную версию на Drupal.

Были изменены url

с .../products/mikrovolnovye-pechi/...

на .../mikrovolnovye-pechi/... аналогично по всем категориям.

Настроены редиректы.

За этот немалый уже период новый сайт так и не проиндексировался нормально.

Вот, что по сей день видим в выдаче по продуктовым запросам:

http://prntscr.com/fggw22

В robots.txt стоит Disallow: /*products

Может ли это быть причиной "непроиндексированности" нового сайта или же нужно просто подождать?

сайт о монетах (http://dema.com.ua/)

W

196

wicker

6 июня 2017, 10:23

#1

baturdem, все логично, раз вы закрыли страницы, которые еще не выпали из индекса. достаточно было прописать у старых страниц тег canonical, сделать редиректы и ждать.

1

Комплексный аудит ИМ. Формирование УТП, анализ юзабилити, каналов продвижения. Контекстная реклама, настройка систем аналитики. Консультация - бесплатно, в ЛС

B

54

baturdem

6 июня 2017, 10:30

#2

wicker:
baturdem, все логично, раз вы закрыли страницы, которые еще не выпали из индекса. достаточно было прописать у старых страниц тег canonical, сделать редиректы и ждать.

Как быть теперь? Править robots (удалить Disallow: /*products) или все же ждать?

DX

60

dmitriy_xom

7 июня 2017, 14:42

#3

baturdem:
Как быть теперь? Править robots (удалить Disallow: /*products) или все же ждать?

а зачем Вы вообще закрывали в robots.txt? Вы сами написали "Настроены редиректы." Если 301 корректно работает (проверьте ответы заголовков сервера), все бы старый норм переклеелись на новые, без закрытия... 1. проверьте правильность работы редиректов 2. откройте доступ для бота 3. ждите по переиндекс пройдет

1

Тестируем сайт перед запуском: Инфографика: 9 самых частых Аудит Google Page Experience:

В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах

Зачем быть уникальным в мире, где все можно скопировать