Индексация в Google - проблемы, способы, методы, вопросы

Vladimir SEO
На сайте с 19.10.2011
Offline
1963
#141
topmedia #:

похоже началась движуха, краулер гугла бъет рекорды вторую неделю

в 4 раза больше заходов, чем обычно

допилили значит и это очень хорошо, ато качели карусели немного надоели 

MrPi #:

Каким был сайт и каким стал? Не обновляет отсутствие контента и отказы при переходе?

так и нету ответа на мой вопрос про код для гуглбота. Сайт может висеть годами с отказами кстати изза длинных пф
Эксперт по продуктам Google https://support.google.com/profile/58734375 ᐈ Продвижение коммерческих сайтов https://kulinenko.com/
Asmin
На сайте с 25.07.2021
Offline
80
#142
У кого то есть такая проблема, что в консоле гугла, при ручном добовлении страницы сайта на индексирование выдаёт такую ошибку ? -
URL недоступен Google
Сканирование разрешено?
Да
Получение страницы
error
Не удалось выполнить. Не удалось получить доступ к Robots.txt
Индексирование разрешено?

Отсутствует

И преэтом такая же ошибка при проверке прямой ссылки на Robots.txt.


Vladimir SEO
На сайте с 19.10.2011
Offline
1963
#143
Asmin #:
У кого то есть такая проблема, что в консоле гугла, при ручном добовлении страницы сайта на индексирование выдаёт такую ошибку ? -
URL недоступен Google
Сканирование разрешено?
Да
Получение страницы
error
Не удалось выполнить. Не удалось получить доступ к Robots.txt
Индексирование разрешено?

Отсутствует

И преэтом такая же ошибка при проверке прямой ссылки на Robots.txt.


это бот не может получить роботс - смотрите настройки консоли  - сканирование - проблемы с хостом, роботсом 

Asmin
На сайте с 25.07.2021
Offline
80
#144
Vladimir SEO #:
это бот не может получить роботс - смотрите настройки консоли  - сканирование - проблемы с хостом, роботсом 

Уже третий день бьюсь над этой проблемой. Ни я не тех. потдержка хостинга не можем понять в чём проблема. На других моих сайтах на этом хостинге проблем нет. Блокируется только один домен. 

Vladimir SEO
На сайте с 19.10.2011
Offline
1963
#145
Asmin #:

Уже третий день бьюсь над этой проблемой. Ни я не тех. потдержка хостинга не можем понять в чём проблема. На других моих сайтах на этом хостинге проблем нет. Блокируется только один домен. 

а в настройках сканирования что ? 
Asmin
На сайте с 25.07.2021
Offline
80
#146
Vladimir SEO #:
а в настройках сканирования что ? 

Никаких ограничений нет. Уже сделал полную копию сайта на другой домен, сканируется без проблем. 
А с этим доменом какие то проблемы. Уже гугл адсенс начал ругатся что проблемы с некоторыми страницами. Мол тоже - Поисковый робот: файл robots.txt недоступен.
Хотя если скормить строницу сайта гуглу в консоле, то он её выплюнет с ошибкой, а через некоторое время, при проверке этой же страницы она уже в статусе просканирована. Я точно уверен что броблема в хостинге, но они упорно это отрицают. Сдругой стороны, другие мои сайты у них индексируются без проблем. 

Vladimir SEO
На сайте с 19.10.2011
Offline
1963
#147
Asmin #:

Никаких ограничений нет. Уже сделал полную копию сайта на другой домен, сканируется без проблем. 
А с этим доменом какие то проблемы. Уже гугл адсенс начал ругатся что проблемы с некоторыми страницами. Мол тоже - Поисковый робот: файл robots.txt недоступен.
Хотя если скормить строницу сайта гуглу в консоле, то он её выплюнет с ошибкой, а через некоторое время, при проверке этой же страницы она уже в статусе просканирована. Я точно уверен что броблема в хостинге, но они упорно это отрицают. Сдругой стороны, другие мои сайты у них индексируются без проблем. 

пишите на гугл форум будем смотреть, если смена домена без любых технических изменений устраняет проблему. 
Сердитый дельфин
На сайте с 14.06.2025
Online
16
#148
Vladimir SEO #:

допилили значит и это очень хорошо, ато качели карусели немного надоели 

Ничоси там объёмы у вас 😅

У меня без качелей.


Споры в интернете — это как олимпиада умственно отсталых: если ты выиграл спор, ты всё равно дебил.
Vladimir SEO
На сайте с 19.10.2011
Offline
1963
#149
Сердитый дельфин #:

Ничоси там объёмы у вас 😅

У меня без качелей.


там 12 лямов страниц)) обычная движуха 
J4
На сайте с 27.03.2011
Offline
126
#150

А никто не сталкивался в ошибкой "обнаружена директива noindex в HTTP-заголовке X-Robots-Tag" - прямо очень много стало такого добра на сайтах на Wordpress. Смотрю как получает страничку гуглбот - ответ 200, в копии страницы нет никаких noindex, как и запретов в роботсе и картах сайта.

Сторонние сервисы также ничего не находят в  X-Robots-Tag.

Спасает только изменение адреса страниц.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий