Какой путь исправления проблемы (sitemap.xml с дублями) для Яндекс поиска правильнее?

S
На сайте с 22.04.2007
Offline
133
1811
Здравствуйте!

Ситуация: На сайте стояла приблуда от панели хостинга, создающая sitemap.xml

Из-за смены темы Вордпресса в sitemap.xml посыпались куча дублей страниц магазина с параметрами сортировки цены, количества товаров на страницу и.т.д.
sitemap.xml разросся раз в 7 и стал весить около 1.4 Mb
Проблема - дубли (как известно никакой поисковик их не любит).

Было придумано 2 пути решения:

1. Вариант. (Что и было сделано).
Отключить хостерскую приблуду (она не настраивается никак на исключение параметров) и включить сайтмап от Yoast SEO.
В robots.txt для надежности прописать соответствующие Disallow (для всех пауков и Гугла) и Clean-param для Яндекса.
Сейчас карта сайта от Yoast SEO (многостраничная) с разбитая по категориям, товарам, марка товаров итд.
Карта весит 0.25 Mb

2. Вариант (Показался бредовым)
Оставить приблуду и ее карту весящую 1.4 Mb
В robots.txt прописать все что в Варианте 1.
Почему показался бредовым: заставлять паука Яндекса читать 1.4Mb, пробегать дубли и заставлять сравнивать их с правилами robots.txt кажется немного наглостью.

Прошло 4 дня но в Яндекс так и не появились утерянные страницы.
Теперь по прошествии 4 дней "Вариант 2" кажется не таким и бредовым.
Может действительно не надо было менять всю карту, а оставить старую огроменную с дублями и это Яндексу проще (перелопатить ее на директивы robots.txt) чем перечитывать новую карту от Yoast?
Антоний Казанский
На сайте с 12.04.2007
Offline
742
#1
seoseoseo :
Было придумано 2 пути решения:
seoseoseo :
Сейчас карта сайта от Yoast SEO (многостраничная)

Я не работаю с  Yoast SEO, но поступил бы следующим образом - выполнил краулинг сайта программой Screaming Frog и с учётом текущих правил robots.txt сформировал XML карту. Её бы и использовал как актуальную.

Если со структурой и навигацией сайта всё в порядке, то вы должны получить вполне рабочую XML карту.

√ SEO продвижение ► https://akazansky.ru - экспертный аудит сайтов ( https://akazansky.ru/audit-sajtov ), внедрение эффективных решений цифрового маркетинга. Разговоры о SEO и не только: культурно, вежливо, доброжелательно ► https://t.me/seotusovochka
S
На сайте с 22.04.2007
Offline
133
#2
Кстати в отчете Яндекса (полный csv смотрю) почему то вообще пропали ссылки на почти все разделы магазина.
То есть например site.com/shop/marka/mercedes был и в старой карте (от приблуды) и в новой есть от Yoast, но в отчете Яндекса его нет (ни в BAD ни в CANONICAL).
Просто не очень понятно что за процесс идет и как соориентироваться в ожиданиях?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий