Проверка ответа сервера - Яндекс

JD
На сайте с 30.11.2019
Offline
3
675

Приветствую. Подскажите пожалуйста в чём проблема, 2й день уже бьюсь не могу добиться результата.

Имеем такой .htaccess (часть из него):


DirectoryIndex index.html index.php
Options -Indexes

AddDefaultCharset windows-1251

RewriteEngine on

RewriteCond %{HTTPS} off
RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [L,R=301]

Options +FollowSymlinks
RewriteBase /

Redirect 301 /index.php http://www.SITE.ru/
RewriteRule ^index\.php$ http://www.SITE.ru/ [R=301,L]

RewriteCond %{HTTP_HOST} ZERKALO-SITE.ru
RewriteRule (.*) http://www.SITE.ru/$1 [R=301,L]

RewriteCond %{HTTP_HOST} ^SITE.ru
RewriteRule (.*) http://www.SITE.ru/$1 [R=301,L]

RewriteRule ^/links(/)?$ /links [L,QSA]

В итоге при проверке ответа сервера на яндекс получаем:


Не удалось скачать содержимое страницы

Сайт стоит на ВПС, Apache, PHP 5.4.16, стоит SSL сертификат.

Сайт пингуется с любых точек.

Из-за этого выключат магазин в Яндекс.Маркет

Прошу у знающих людей помощи, что может быть. Если тему оформил нет там, перенесите пожалуйста.

SeVlad
На сайте с 03.11.2008
Offline
1609
#1
JIOPD:

Сайт пингуется с любых точек.

Пинг тут вообще ни о чем. Тебе же чётко сказано:

JIOPD:
Не удалось скачать содержимое страницы

Попробуй для начала на https://bertal.ru/ прикинувшись яндексом и получить код страницы.

Делаю хорошие сайты хорошим людям. Предпочтение коммерческим направлениям. Связь со мной через http://wp.me/P3YHjQ-3.
JD
На сайте с 30.11.2019
Offline
3
#2

Проверяю на сервисе bertal.ru получаем следующее:

URL указываем https://SITE.ru

Получаем:

HTTP/1.1 301 Moved Permanently
Date: Sat, 30 Nov 2019 12:24:52 GMT
Server: Apache/2.4.6 (CentOS) OpenSSL/1.0.2k-fips PHP/5.4.16
Location: http://www.SITE.ru/
Cache-Control: max-age=2592000
Expires: Mon, 30 Dec 2019 12:24:52 GMT
Content-Length: 232
Content-Type: text/html; charset=iso-8859-1

HTTP/1.1 301 Moved Permanently
Date: Sat, 30 Nov 2019 12:24:52 GMT
Server: Apache/2.4.6 (CentOS) OpenSSL/1.0.2k-fips PHP/5.4.16
Location: https://www.SITE.ru/
Cache-Control: max-age=2592000
Expires: Mon, 30 Dec 2019 12:24:52 GMT
Content-Length: 233
Content-Type: text/html; charset=iso-8859-1

Включил "Показать html-код страницы" , пустая страница.

URL указываем https://www.SITE.ru получаем:

ОШИБКА:
Не могу определить ответ сервера.
-----------------------------------------
ВОЗМОЖНЫЕ ПРИЧИНЫ:
- Вы ввели некорректные данные в одно из полей формы
- Время соединения с сервером превышает 20 секунд
- Размер данных превышает 4 МБ
-----------------------------------------
Пожалуйста, проверьте правильность ввода данных и повторите попытку.

c Google Bot, тоже самое.

А вот с Yahoo html-код страницы показал, и вот что показывает:

HTTP/1.1 301 Moved Permanently
Date: Sat, 30 Nov 2019 12:30:40 GMT
Server: Apache/2.4.6 (CentOS) OpenSSL/1.0.2k-fips PHP/5.4.16
Location: http://www.SITE.ru/
Cache-Control: max-age=2592000
Expires: Mon, 30 Dec 2019 12:30:40 GMT
Content-Length: 232
Content-Type: text/html; charset=iso-8859-1

HTTP/1.1 301 Moved Permanently
Date: Sat, 30 Nov 2019 12:30:40 GMT
Server: Apache/2.4.6 (CentOS) OpenSSL/1.0.2k-fips PHP/5.4.16
Location: https://www.SITE.ru/
Cache-Control: max-age=2592000
Expires: Mon, 30 Dec 2019 12:30:40 GMT
Content-Length: 233
Content-Type: text/html; charset=iso-8859-1

HTTP/1.0 200 OK
Date: Sat, 30 Nov 2019 12:30:40 GMT
Server: Apache/2.4.6 (CentOS) OpenSSL/1.0.2k-fips PHP/5.4.16
X-Powered-By: PHP/5.4.16
Set-Cookie: PHPSESSID=3opjqgvd2o66ftrhpssmokdf24; path=/
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-cache, must-revalidate
Pragma: no-cache
Status: 200 OK
Last-Modified: Sat, 30 Nov 2019 10:00:00 GMT
Vary: Accept-Encoding,User-Agent
Connection: close
Content-Type: text/html; charset=windows-1251
JD
На сайте с 30.11.2019
Offline
3
#3

Проверяю через сервис bertal.ru вот что получаем:

указываем ссылку https://SITE.ru

HTTP/1.1 301 Moved Permanently

Date: Sat, 30 Nov 2019 12:35:47 GMT
Server: Apache/2.4.6 (CentOS) OpenSSL/1.0.2k-fips PHP/5.4.16
Location: http://www.SITE.ru/
Cache-Control: max-age=2592000
Expires: Mon, 30 Dec 2019 12:35:47 GMT
Content-Length: 232
Content-Type: text/html; charset=iso-8859-1

HTTP/1.1 301 Moved Permanently
Date: Sat, 30 Nov 2019 12:35:47 GMT
Server: Apache/2.4.6 (CentOS) OpenSSL/1.0.2k-fips PHP/5.4.16
Location: https://www.SITE.ru/
Cache-Control: max-age=2592000
Expires: Mon, 30 Dec 2019 12:35:47 GMT
Content-Length: 233
Content-Type: text/html; charset=iso-8859-1

html-код страницы не грузит.

указываем ссылку https://www.SITE.ru получаем следующее:

ОШИБКА:
Не могу определить ответ сервера.
-----------------------------------------
ВОЗМОЖНЫЕ ПРИЧИНЫ:
- Вы ввели некорректные данные в одно из полей формы
- Время соединения с сервером превышает 20 секунд
- Размер данных превышает 4 МБ
-----------------------------------------
Пожалуйста, проверьте правильность ввода данных и повторите попытку.

html-код так-же не грузит.

Проверяю как google bot выдаёт так-же как и yndex.

Проверяю как yahoo bot получаем следующее:

указываем ссылку: https://SITE.ru

HTTP/1.1 301 Moved Permanently

Date: Sat, 30 Nov 2019 12:39:47 GMT
Server: Apache/2.4.6 (CentOS) OpenSSL/1.0.2k-fips PHP/5.4.16
Location: http://www.SITE.ru/
Cache-Control: max-age=2592000
Expires: Mon, 30 Dec 2019 12:39:47 GMT
Content-Length: 232
Content-Type: text/html; charset=iso-8859-1

HTTP/1.1 301 Moved Permanently
Date: Sat, 30 Nov 2019 12:39:47 GMT
Server: Apache/2.4.6 (CentOS) OpenSSL/1.0.2k-fips PHP/5.4.16
Location: https://www.SITE.ru/
Cache-Control: max-age=2592000
Expires: Mon, 30 Dec 2019 12:39:47 GMT
Content-Length: 233
Content-Type: text/html; charset=iso-8859-1

HTTP/1.0 200 OK
Date: Sat, 30 Nov 2019 12:39:48 GMT
Server: Apache/2.4.6 (CentOS) OpenSSL/1.0.2k-fips PHP/5.4.16
X-Powered-By: PHP/5.4.16
Set-Cookie: PHPSESSID=u652tsbkjkrq1or15qaombb2q6; path=/
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-cache, must-revalidate
Pragma: no-cache
Status: 200 OK
Last-Modified: Sat, 30 Nov 2019 10:00:00 GMT
Vary: Accept-Encoding,User-Agent
Connection: close
Content-Type: text/html; charset=windows-1251

и html-код загружает.

в robots.txt блокировок ботов вроде бы нет.

User-agent: *

Disallow: /*/*/*.html?*
Disallow: /?pg=*
Disallow: /*search
Disallow: /*/*razmer
Disallow: /*pg=brend
Disallow: /*/action=
Disallow: /*/*primen=
Disallow: /poisk
Disallow: /rate
Disallow: /home.htm
Disallow: /index.php
Disallow: /*?id=kr
Disallow: /*?id=at
Disallow: /*?utm

User-agent: Googlebot*
Disallow: /*/*/*.html?*
Allow: /*.css
Allow: /*.js
Allow: /*.jpg
Allow: /*.png
Allow: /*.gif
Disallow: /?pg=*
Disallow: /*search
Disallow: /*/*rasmer
Disallow: /*/action=
Disallow: /*/*primen=
Disallow: /*sale=yes
Disallow: /links/*
Disallow: /sendorder/*
Disallow: /rate
Disallow: /index.php
Disallow: /*?id=kr
Disallow: /*?id=at
Disallow: /*?utm

что может быть?

SeVlad
На сайте с 03.11.2008
Offline
1609
#4
JIOPD:
указываем ссылку https://SITE.ru

У тебя циклический редирект.

Определись какой протокол тебе нужен и исправь в хтацесее.

S
На сайте с 30.09.2016
Offline
469
#5
SeVlad:
У тебя циклический редирект.

Не уверен. Конечно, .htaccess там написан жопой, но циклический редирект проявился бы и без гуглояндексов (если бы он был при запросе https://www.SITE.ru).

Отпилю лишнее, прикручу нужное, выправлю кривое. Вытравлю вредителей.
JD
На сайте с 30.11.2019
Offline
3
#6

Забыл сказать, что в .htaccess вот эти строки закомментированные, если их открываю, сайт не открывается.


#Redirect 301 /index.php http://www.SITE.ru/
#RewriteRule ^index\.php$ http://www.SITE.ru/ [R=301,L]

Сегодня ночью от яндекс получил письмо, что сайт в 03:48 стал доступен, а вот в 03:53 пришло опять письмо, что уже не доступен.

SeVlad
На сайте с 03.11.2008
Offline
1609
#7
Sitealert:
Не уверен.

Да, ты прав. Я, взглянув на первые ответы, не обратил внимание на последовательный редирект через www.

JIOPD:
Сегодня ночью от яндекс получил письмо, что сайт в 03:48 стал доступен, а вот в 03:53 пришло опять письмо, что уже не доступен.

На этот тормоз не обращай внимание. Исправляй хтацесс, пока внешние сервисы не получат контент страницы.

И не надо делать последовательный редирект через www. Сделай нормально. В сети полно манов. Да и в закреплённом топике не раз писали

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий