Форум Сайтостроение Веб-строительство

Не удалось обработать файл Sitemap

123 4
E1
На сайте с 20.04.2012
Offline
50
Extrim16
15133

Доброго времени суток

Добавил сайт в поисковую консоль гугла около 2 недель назад, сразу же до кучи отправил сайтмап. Все производилось в новой версии консоли. Все это время в статусе светиться "Не Получено", а при открытии подробностей сообщение:

Не удалось обработать файл Sitemap
Общая ошибка HTTP
При попытке доступа к вашему файлу Sitemap произошла ошибка. Убедитесь, что этот файл Sitemap соответствует нашим правилам и находится в указанном местоположении, а затем отправьте его повторно.

Карта сайта генерируется через Yoast, без каких-либо модификаций из вне и разбита на несколько подкарт (посты, категории, страницы). Пробовал отправлять повторно, вставлять сразу подкарты - ситуация аналогична. В старой версии консоли статус "В ожидании". При проверке через гугловский инструмент:

Количество дочерних файлов в файле индекса Sitemap 3
Сведения об ошибках: Ошибки отсутствуют.

В индексе все еще не попала ни одна страница сайта (сайт по питанию, зона .com, материал англоязычный (консоль русская)). По логам, гуглобот часто запрашивает robots.txt, ads.txt. Один раз запросил карту сайта (если не изменяет память, это время совпало с тем, когда я повторно ее отправил через консоль). Примеры запросов:

66.249.65.136 - - [22/May/2018:08:38:37 +0200] "GET /ads.txt HTTP/1.1" 404 14690 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
91.65.25.166 - - [22/May/2018:10:51:33 +0200] "GET /robots.txt HTTP/1.1" 200 162 "-" "Mozilla/5.0 (compatible; Googlebot/2.1 +http://www.googlebot.com/bot.html)"

При переотправке и проведении проверки в инструменте:

66.249.69.24 - - [22/May/2018:20:06:06 +0200] "GET /sitemap.xml HTTP/1.1" 301 5 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.69.20 - - [22/May/2018:20:06:07 +0200] "GET /sitemap.xml HTTP/1.1" 301 5 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.69.24 - - [22/May/2018:20:06:07 +0200] "GET /sitemap_index.xml HTTP/1.1" 200 327 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.69.20 - - [22/May/2018:20:06:08 +0200] "GET /sitemap.xml HTTP/1.1" 301 5 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.69.20 - - [22/May/2018:20:06:09 +0200] "GET /sitemap_index.xml HTTP/1.1" 200 327 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.69.22 - - [22/May/2018:20:06:10 +0200] "GET /sitemap.xml HTTP/1.1" 301 5 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.69.22 - - [22/May/2018:20:06:10 +0200] "GET /sitemap_index.xml HTTP/1.1" 200 327 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
66.249.69.22 - - [22/May/2018:20:06:11 +0200] "GET /sitemap_index.xml HTTP/1.1" 200 327 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

robots.txt:

User-agent: Yandex
Disallow: /wp-admin
Disallow: /author/
Disallow: /wp-login
Disallow: /tag
Disallow: /?s=
Disallow: /?feed=

Host: https://domain.com/

User-agent: *
Disallow: /wp-admin
Disallow: /author/
Disallow: /wp-login
Disallow: /tag
Disallow: /?s=
Disallow: /?feed=

Sitemap: https://domain.com/sitemap_index.xml

На сервере используются редиректы с www на не-www и с не-www на https не-www.

Были ли у кого-то еще подобные проблемы и в какую сторону можно покопать? Заранее благодарю.

adel92
На сайте с 04.01.2012
Offline
334
adel92
#1

Сайту всего 2 недели? Зарегистрировали домен и добавили?

NVMe VDS (https://well-web.net/nvme-vps) с поддержкой 24/7 - от 545 руб.! Безлимитный хостинг (https://well-web.net/ssd-hosting) - от 129 руб.! Домен в подарок! Перенос бесплатно! Заказывайте сейчас, и получите скидку 50%! Заходи! (https://well-web.net/limited-offers)
E1
На сайте с 20.04.2012
Offline
50
Extrim16
#2

Домену уже около месяца, то что проблема во времени пока единственный вариант, но почему тогда отображается ошибка в карте сайта?

BC
На сайте с 21.08.2018
Offline
0
BizContent
#3

Сам столкнулся с подобной проблемой. Удалось ли ее решить? Если да, то как?

Тут плагин креативит файлы виртуально, а роботы бывают не видят файлы, когда их физически нет в положенном месте.

Как временная мера - сохраняю вручную и кладу в корень.

S
На сайте с 25.12.2003
Offline
173
Saney
#4

Эта проблема началась для некоторых новых сайтов сразу же после появления бета версии нового интерфейса консоли с полгода назад. В консоли sitemap.xml висит сообщение "pending" месяцами. У меня ради теста уже месяца 3 один сайт такой. На форуме google для вебмастеров тупо смеются с людей, направляют читать справку, типа, у них все работает. На самом же деле, чтобы заработало, нужно вместо sitemap.xml создать sitemap.txt с адресами простым списком - сразу же заработает :)

Файл sitemap.txt
http://mydomain.com/page1.html
http://mydomain.com/page2.html
http://mydomain.com/page3.html
...
Красивые сниппеты Google ( https://saney.com/tools/google-snippets-generator.html )
BC
На сайте с 21.08.2018
Offline
0
BizContent
#5

Заметил, что в шапке xml файла генерируется ссылка на xls файл в виде href="//site.com/.../main-sitemap.xsl"

Возможно в этом корень проблем. Ведь ссылка должна быть или относительной или абсолютной, а тут какой-то уродец.

S
На сайте с 30.09.2016
Offline
469
Sitealert
#6
Saney:
нужно вместо sitemap.xml создать sitemap.txt

Где создать?

Отпилю лишнее, прикручу нужное, выправлю кривое. Вытравлю вредителей.
BC
На сайте с 21.08.2018
Offline
0
BizContent
#7

Видимо в корне сайта и скормить туда в виде простых ссылок то, что нагенерил плагин.

S
На сайте с 25.12.2003
Offline
173
Saney
#8
Sitealert:
Где создать?

На своем сайте создать, и добавить его в google webmasters в разделе sitemaps. Google понимает карты сайта в txt формате обычным списком. Он сразу определит ссылки и начнет индексировать. Никакого pending не будет :)

BC
На сайте с 21.08.2018
Offline
0
BizContent
#9

Экспериментирую с ГуглБотом. Заметил, что плагин Акисмет (антиспам) имеет на него влияние. Деактивировал его. Всеравно комменты не юзаю, а рекапча с форм7 и без него корректно работает. Заслал сайтмапы заново. Жду результата.

S
На сайте с 30.09.2016
Offline
469
Sitealert
#10
Saney:
Google понимает карты сайта в txt формате обычным списком.

А Яндекс понимает? И как же быть со всякой дополнительной инфой из сайтмапа?

---------- Добавлено 22.08.2018 в 00:30 ----------

BizContent:
href="//site.com/.../main-sitemap.xsl"
ссылка должна быть или относительной или абсолютной, а тут какой-то уродец.
Забавное замечание. ;)
123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий