Роботс

M
На сайте с 30.10.2012
Offline
77
1079

Здравствуйте, уважаемые сеошники. Использую такой роботс.тхт. Однако заметил сегодня, что многие страницы заблокированы в Гугл Вебмастер, указывается, что именно роботс закрывает информацию для бота. Вопрос: что делать, менять роботс или что?

User-agent: Yandex

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-json/

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: */embed

Disallow: */feed

Disallow: /cgi-bin

Disallow: *?s=

Disallow: */attachment/

Allow: /wp-admin/admin-ajax.php

User-agent: Googlebot

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-json/

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: */embed

Disallow: */feed

Disallow: /cgi-bin

Disallow: *?s=

Disallow: */attachment/

Allow: /wp-admin/admin-ajax.php

User-agent: *

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-json/

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: */embed

Disallow: */feed

Disallow: /cgi-bin

Disallow: *?s=

Disallow: */attachment/

Allow: /wp-admin/admin-ajax.php

Host: https://stressamnet.ru/

Sitemap: https://stressamnet.ru/sitemap.xml

Tryd0g0lik
На сайте с 24.04.2012
Offline
99
#1

поиском на форруме научитесь пользоваться.

Оно и то же спрашиваете,

Ко мне можно на ТЫ!
ТР
На сайте с 24.09.2016
Offline
207
#2
Tryd0g0lik:
поиском на форруме научитесь пользоваться.
Оно и то же спрашиваете,

Он не спрашивает, он ссылку воткнул)))

---------- Добавлено 14.07.2018 в 23:57 ----------

Вот это можете убирать однозначно.

А по остальному, мы же не видим, что у вас конкретно закрыто. Обычно при проверке в вебмастере показывает, какая директива закрывает страницу. Вот там и правьте.

Как копирайтеру хорошо зарабатывать (https://copywriting-tarasov.ru/?p=613) https://copywriting-tarasov.ru/ (https://copywriting-tarasov.ru/) Бесплатный аудит РК в Яндекс.Директе
Tryd0g0lik
На сайте с 24.04.2012
Offline
99
#3
Тарасов Роман:
Он не спрашивает, он ссылку воткнул)))

---------- Добавлено 14.07.2018 в 23:57 ----------


Забыл еще ftp доступ воткнуть или пример заблокированных страниц

M
На сайте с 30.10.2012
Offline
77
#4
Tryd0g0lik:
Забыл еще ftp доступ воткнуть или пример заблокированных страниц

Почти все в Гугл Вебмастере заблокированы

---------- Добавлено 15.07.2018 в 14:51 ----------

Вот на это ругается Disallow: /wp-includes

Tryd0g0lik
На сайте с 24.04.2012
Offline
99
#5

Даже интересно.

У Вас WordPress?

ДАйте FTP, доступ в админку и список заблокированных

Проиндексированных вижу 325

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий