Vladimir SEO

Vladimir SEO
kulinenko.com
kulinenko
kulinenko
Рейтинг
2083
Регистрация
19.10.2011
Должность
SEO
Интересы
music & travel
Занимаюсь оптимизацией интернет-магазинов и сайтов услуг с 2010 года. Так же веду проекты с нуля под органический трафик из Поисковых систем. Эксперт по продуктам Google в области ранжирования, индексации, сканирования, google search console https://support.google.com/profile/58734375
Search console - robots.txt Не получен - Отсутствует
marselniz #:
Проблема получается с частыми периодическими сбоями доступа к robots.txt и, возможно, как следствие этого - ни одна карта сайта "не получена" и не обработана из-за какой-то "общей ошибки HTML".
бот начинает скан с роботс тхт - если там беда и он не может его получить - то дальше ни карты, ни страницы само собой не "доступны"
Сутки живу без метрики ..
Bellion87 #:

Яндекс у меня МПК. Пользовался только Метрикой. Теперь думаю, если нет Гугл аналитики, но сайт подключен к search.google, тоже считается нарушением?

консоль это не счетчик данных посетителей, там нету данных про кто заходит , возраст пол итд
Search console - robots.txt Не получен - Отсутствует
garry69 #:

Я считаю, что решилась после загрузки новой карты сайта. Старая с ошибкой отдавалась после изменения, закинул новую и вопрос решился.

вполне может быть, но вот карта никак не связана в консоли с роботс тхт
Сутки живу без метрики ..
Bellion87 #:

Я уже снес. Думаю Как это отразиться, на индексации. 

не будет работать обход по счетчикам метрики, как же еще
Search console - robots.txt Не получен - Отсутствует
garry69 #:

Ровно тоже проблема на одном сайтике была, наверно пол года с периодичностью в неделю пытался индексировать всякими способами и ничего, закрыто в роботс.

Сайт не сильно нужный, скорее для истории и не переживал. Но в один день решил карты сайта и ленты переделать на более прогрессивные решения. Через недельку вспомнил, что надо и в консоле заменить на новые. Заменил, дня через два, если не путаю, попытался закинуть новый урл в индекс и всё прошло без проблем. закинул все прошлые за некоторое время, что не индексировал и новые теперь без проблем.

бывает такое что проблема решается сама через некоторое время, хорошо это или плохо - решать вам. Но факт присутсвует
Google Updates - апдейты Гугл
dtools #:
Когда будет ап  от гугл а или он идет уже как понять а то резкая ппросадка

апдейты указаны в первом посте

ссылка вот https://status.search.google.com/products/rGHU1u87FJnkP6W2GwMi/history?hl=en%C2%A0

когда будет ? знают только сотрудники гугла, коих тут нет

Search console - robots.txt Не получен - Отсутствует
xschneider #:

Туда, где есть еще проблема того, что гугл перестал нормально видеть редиректы и по всем инспектам показывает 200 ОК при проверке

есть и такое, тупо на некоторых проектах что угодно пишет по куче редиректов уже год почти. И в индексе держит и выкидывает в непроиндексированно, увы
Сутки живу без метрики ..
softerra #:
4ая неделя идет без метрики, позиции пока хорошие ..
А я заменил лого на сайте с красного на темнокрасный, 4 неделя прошла, позиции пока хорошие !!! Ура
Search console - robots.txt Не получен - Отсутствует

Кстати хотел прояснить немного тему: 

Запрос на скан в консоли вызывает обычного бота

Проверка - Inspection Tool

Айпи у них - из набора основных.

Что в принципе и видно по скринам ТС  где оба запроса выдает с ошибкой роботс. Проблема у ТС не одна - есть еще примеры на гугл форуме. Выясняем что и куда

Search console - robots.txt Не получен - Отсутствует
Кстати можно проверить не подделаны ли боты https://developers.google.com/search/docs/crawling-indexing/verifying-googlebot?hl=ru

Списки айпи прилагаются для всех типов ботов 
1... 278279280281282283284285286 ...3619
Всего: 36184