Если не заморозить комментарии, это же уже не копия на копию будет переезд, так как новые комментарии = новый контент.
С этим я не совсем понял, ведь при обращении к старому robots.txt будет 301 редирект на новый robots.txt
Наконец то дождался обновления данных в разделе Индексирование. Почти месяц ждал, довольно редко гугл обновляет эти данные?
Переезд я уже отменил и откатил на старый домен, но ждал обновления чтобы изучить что именно сканировал бот на новом домене.
И вот что я там увидел:
Страница является копией. Канонический вариант не выбран пользователем.
35к страниц. На старом домене до переезда там было 16к страниц.
Там поголовная часть страниц вот такого вида:
/index.php?do=feedback&user=163195/index.php?do=feedback&user=183790
И немного меньше вот таких
/user/skiletzz/rss.xml/user/Miloshkca_milu/rss.xml/user/Milanka+Matveeva/rss.xml
Не понимаю зачем вообще гугл пытается такие страницы индексировать, и как сказать гуглу не индексировать такие страницы?
В robots.txt есть запись:
Disallow: /user/
Disallow: /*do=feedback
Но гугл их игнорирует и почему-то всё равно пытается индексировать.
Страница заблокирована из-за ошибки 403 (доступ запрещен)
52к страниц. На старом домене до переезда там было 59к страниц.
Там абсолютно все страницы вот такого вида.
/favorites/Wisyoj/list/8/favorites/Alia_kor/list/7/favorites/Лафрэй/list/1
Ну тут всё правильно, раздел закладок только для зарегистрированных, поэтому нет у гугла доступа, но опять таки зачем он их пытается индексировать, и как сказать ему не индексировать?
Disallow: /*do=favorites
Видимо надо добавить и вот такую Disallow: /favorites/
Но по примеру выше, записи в robots.txt не особо то и помогают.
Страница просканирована, но пока не проиндексирована
270 к страниц.
На старом домене до переезда там было 100к страниц, но там малозначимые страницы.
Из которых всё те же адреса что и ранее в других разделах были:
/user/x0loved/
/index.php?cstart=60151&do=lastcomments
/user/cheniko/rss.xml
У нового домена в этом разделе тоже большая часть таких страниц, но есть и значимые страницы тоже.
По итогу, почему гугл при переезде в приоритете обрабатывает какие-то малозначимые, а в некоторых случаях запрещённые в роботс страницы?
А 400к уже проиндексированных нормальных страниц у старого домена не перенёс.
Большое спасибо за ответы и за скрины, а так же за статью которую вы кидали выше, там в статье сказано что после переезда:
Причину примерно понял, думаю дело в этом:
Решил сделать вот как:
Сейчас сделаю чтобы реферер передавался и аналитика начала видеть органический трафик.
Жду пару дней, и если картина не меняется, делаю откат с нового домена на старый домен.
Ибо гугл сейчас походу уже сам начал откат, так как в выдаче выдаёт старый домен вместо нового.
Поработаю месяцок на старом домене, и сделаю новый переезд на новый домен.
Цепочка будет такая:
Новый домен откат на -> Старый домен.
Старый домен -> Переезд на новый домен.
Решил проверить вот что, взял популярные страницы которые ранее я уже видел в результатах поиска с новым доменом.
В поиск просто ввожу целиком урл вот так https://site.me/..............html с новым доменом.
Сейчас почти все урлы в результат поиска гугл показывает со старым доменом https://site.ru/..............html
Но на один из урлов в поиске выдало вот это:
Первые два это урлы со старыми доменом, а вот если нажать на Показать скрытые результаты, то там сидит урл с новым доменом.
Переезд стартовал 11 числа, сейчас уже пошел 8 день, поведение гугла явно какое-то странное, как думаете, сколько ещё так можно ждать и наблюдать, или уже сейчас начать что-то предпринимать? И что предпринимать в таких случаях?
Ок, добавление нового контента я могу остановить, но как остановить добавление новых комментариев, это по сути убить активность юзеров на сайте.
Если честно я не понял, на сайте все внутренние урлы идут через слэш без домена, т.е. вот так /......html, и при открытии сайта с новым доменом, все урлы имеют уже новый урл.
А при попытке открыть любой старый урл со старым доменом, то идёт редирект на урл с новым доменом.
На этом же форуме в разных топиках и читал.
Я вот месяц назад с ru на net... сайт переносил... Даже и не заметил... Все гладко прошло....
Добавлю ещё:
Переезд с .RU на .ME
На сайте установлен antibot.cloud(не реклама), который режет все переходы, и гугл аналитикс видит все переходы как директ, а не органический переход из поиска, может ли быть дело в этом? Но этот сервис антибота всё время стоял и на старом домене, и сайт нормально развивался в поиске.
Спасибо за рекомендации. Знал что нельзя ничего менять в коде, поэтому как и написал, переезд копия на копию, но добавление нового контента не останавливал, сайт контентный, как бы как его остановишь, когда люди ждут новый контент. Да и читал, что новый контент как раз таки добавлять можно и это не страшно.
Сегодня появилось немного для меня странное явление в гугл консоли.
Вот статистика кликов старого домена, на скринах последнее число которое показывает гугл это 16 число:
Вот статистика у нового домена:
А такое поведение нормально? Как-то пугаеще выглядит.
У старого домена клики снова идут вверх, а у нового резкое падение кликов.
