Форум Практика оптимизации Частные вопросы - ранжирование, индексация, бан

Доступ к отправленному URL заблокирован в файле robots.txt

D
На сайте с 04.03.2019
Offline
2
demll
1836

Добрый день. Такая проблема....

В Search Console в разделе покрытие появилась ошибка, на 136 стр. "Доступ к отправленному URL заблокирован в файле robots.txt"

Ниже приводится список этих страниц, при нажатии кнопки "проверить блокировку url в robots.txt" пишет что стр. доступна, "проверить url" пишет:

Покрытие

Страница просканирована, но пока не проиндексирована

Как обнаружено

Файлы Sitemap

https://******.ru/sitemap.xml

Ссылающаяся страница

Не найдено

В роботс страницы не закрывались, в карте сайта есть, карта загружена... В чем проблема? Был переезд на https

pro_web
На сайте с 02.08.2011
Offline
109
pro_web
#1
demll:
Был переезд на https

Ждите переиндексацию ! На всякий случай проверьте редиректы, а так же коды ответа сервера.

Продам страницу в Facebook. 31к подписчиков (тематика юмор). Подробности в лс.
iOweYouNothing
На сайте с 08.01.2011
Offline
190
iOweYouNothing
#2

СёрчКонсоль очень статична. Даже если всё в порядке и бот кушает страницы, СёрчКонсоль может еще несколько недель моцк по поводу блокировки в роботс парить.

demll:
В роботс страницы не закрывались

- а вот это далеко не факт. Скорее закрывались, чем нет - иначе бы ничего не написала.

Возможно вариант, что Вы недавно домен приобрели (или сайт туда выкатили), а до этого там роботс какой-то висел.

D
На сайте с 04.03.2019
Offline
2
demll
#3

Сайт не новый, 8 лет у меня. Роботс не менялся, только ссылка в нем на https сайтмапа.

Был только переезд на https... может при нем не правильно новый проиндексировался.

так сейчас выглядит "Покрытие": http://skrinshoter.ru/s/050319/dMwTfN7t (картинка чего то не вставляется)

D
На сайте с 04.03.2019
Offline
2
demll
#4
535i:
СёрчКонсоль очень статична. Даже если всё в порядке и бот кушает страницы, СёрчКонсоль может еще несколько недель моцк по поводу блокировки в роботс парить.

- а вот это далеко не факт. Скорее закрывались, чем нет - иначе бы ничего не написала.
Возможно вариант, что Вы недавно домен приобрели (или сайт туда выкатили), а до этого там роботс какой-то висел.

так оно и было, вчера обновились данные в консоле, все стало норм, отправлял запрос на перепроверку 4 марта.

pro_web
На сайте с 02.08.2011
Offline
109
pro_web
#5
demll:
Сайт не новый, 8 лет у меня. Роботс не менялся, только ссылка в нем на https сайтмапа.
Был только переезд на https... может при нем не правильно новый проиндексировался.
так сейчас выглядит "Покрытие": http://skrinshoter.ru/s/050319/dMwTfN7t (картинка чего то не вставляется)

Попробуйте удалить кеш (можно еще и ссылочку твитнуть)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий