Кривой кеш страниц у ПС

S
На сайте с 16.11.2015
Offline
17
1252

Программисты и SEO специалист разводят руками - никто не знает, где искать...

Битрикс, редакция Малый Бизнес, шаблон Аспро

Есть такая проблема - открываю Гугл вебмастер, в нем есть инструмент "Посмотреть как GoogleBot" - так вот что вижу - некоторые страницы / разделы дают статус "Частично выполнено" - http://prntscr.com/hpykww в нем в списке ошибок идет "временно недоступно" - относится к картинкам, шрифтам, AJAX http://prntscr.com/hpz1z4

--

гугл и яндекс криво видят страницы - возьмем пример https://domtentov.ru/catalog/svet-dlya-ulitsy/prozhektory/focus-4000k/

1) кеш ГУГЛа

https://webcache.googleusercontent.com/search?q=cache:8ygg_ZNU2dcJ:https://domtentov.ru/catalog/svet-dlya-ulitsy/prozhektory/focus-4000k/+&cd=1&hl=ru&ct=clnk&gl=ru

2) кеш ЯНДЕКСа

https://hghltd.yandex.net/yandbtm?fmode=inject&url=https%3A%2F%2Fdomtentov.ru%2Fcatalog%2Fsvet-dlya-ulitsy%2Fprozhektory%2Ffocus-4000k%2F&tld=ru&lang=ru&la=1513289344&tm=1513759555&text=https%3A%2F%2Fdomtentov.ru%2Fcatalog%2Fsvet-dlya-ulitsy%2Fprozhektory%2Ffocus-4000k%2F&l10n=ru&mime=html&sign=b74d2b0f2e2409b1f765861bae905b0c&keyno=0

----

а некоторые страницы даже НЕ ИЩУТСЯ в поиске Гугла и Яндекса

https://domtentov.ru/catalog/svet-dlya-doma/torshery-i-napolnye-svetilniki/157004/

---

Разработчики шаблона Аспро дали совет "Скорее все, проблема в настройках robots.txt. Попробуйте проверить этот файл в сервисах, в которых Вы проверяете индексацию." но программист убирал с сайта robots - ошибка не уходит... и плюс инструмент проверки Google проверяет роботс без проблем

---

в какую сторону копать?

богоносец
На сайте с 30.01.2007
Offline
753
#1
Sashazem:
Гугл вебмастер, в нем есть инструмент "Посмотреть как GoogleBot" - так вот что вижу - некоторые страницы

А вы думаете, гугл смотрит на отображение? Как человек?

S
На сайте с 16.11.2015
Offline
17
#2
богоносец:
А вы думаете, гугл смотрит на отображение? Как человек?

ну ведь по сути - для сравнения дается то, как видит пользователь, и то, как видит робот. Плюс некоторые страницы отрабатывает без ошибок - то есть не "частично выполнено", а "готово" и кеш страниц нормально выглядит

А у меня у большинства страниц получается картинки, шрифты недоступны как будто в тот момент, когда робот зашел на страничку.

Было предположение, что

"больше 15 потоков на сайт и отбивает по ip. Скорее всего у вас в битрикс включен параметр ,который отбивает при быстром подключении к сайту с одного источника. Вы просто можете робота блокировать и он не обходит сайт из за этого"

Но у меня редакция Малый бизнес - и в ней не предусмотрен контроль активности модуля Веб-аналитика (чтобы убрать/выставить какие-то ограничения)

богоносец
На сайте с 30.01.2007
Offline
753
#3

Да не нужны боту шрифты...

Кэш — это другое http://webcache.googleusercontent.com/search?q=cache:searchengines.guru/showthread.php?t=981466

запрос cache:ваш-сайт.ru/страница

S
На сайте с 16.11.2015
Offline
17
#4
богоносец:
запрос cache:ваш-сайт.ru/страница

ну к примеру - сравниваю 2 страницы сайта

1. https://webcache.googleusercontent.com/search?q=cache:8ygg_ZNU2dcJ:https://domtentov.ru/catalog/svet-dlya-ulitsy/prozhektory/focus-4000k/+&cd=1&hl=ru&ct=clnk&gl=ru

2. https://webcache.googleusercontent.com/search?q=cache:QKpimxnOhAEJ:https://domtentov.ru/catalog/svet-dlya-doma/torshery-i-napolnye-svetilniki/sl998-804-01/+&cd=1&hl=ru&ct=clnk&gl=ru

есть же разница в визуальном восприятии?

или паника вообще зря и всё в порядке?

богоносец
На сайте с 30.01.2007
Offline
753
#5

Бот не занимается визуальным отображением (чаще всего).

Ему хватает HTML-кода ваших страниц (чаще всего).

Если там у вас чего не грузится (шрифты и т.п) то может быть боту этого и не требуется. Это же не браузер.

Но вы переживаете именно за отображение.

S
На сайте с 16.11.2015
Offline
17
#6
богоносец:

Если там у вас чего не грузится (шрифты и т.п) то может быть боту этого и не требуется. Это же не браузер.
Но вы переживаете именно за отображение.

Переживаю, да. Некоторые страницы показывают "Частично выполнено" НО http://prntscr.com/hwlbyh все картинки / шрифты / AJAX отображают...

богоносец
На сайте с 30.01.2007
Offline
753
#7

Всё основное есть. Вы зациклились не на том, что нужно боту.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий