Форум Сайтостроение Веб-строительство

Подскажите как правильно разрешить Гугл боту сканировать сайт?

M9
На сайте с 26.03.2018
Offline
3
Marcello99
397

А подскажите пожалуйста, как гугл бот поставить в исключение чтобы он мог заходить и сканировать сайт?

Код сейчас вот такой:

<IfModule mod_geoip.c>

GeoIPEnable On

SetEnvIf GEOIP_COUNTRY_CODE UA AllowCountry

</IfModule>

Order Deny,Allow

# Блокировка всех стран, кроме Украины:

Deny from env=!AllowCountry

# Блокировка IP Украины (выборочно):

Deny from XXX.XXX.XXX

LEOnidUKG
На сайте с 25.11.2006
Offline
1774
LEOnidUKG
#1

По-моему запаритесь искать все IP Гугла. Лучше разрешить по Useragent-у.

✅ Мой Телеграм канал по SEO, оптимизации сайтов и серверов: https://t.me/leonidukgLIVE ✅ Качественное и рабочее размещение SEO статей СНГ и Бурж: https://getmanylinks.ru/ ✅ Настройка и оптимизация серверов https://getmanyspeed.ru/
Оптимизайка
На сайте с 11.03.2012
Offline
396
Оптимизайка
#2

В апаче 2.4+ как то так:

<RequireAny>

Require ip *.googlebot.com

Require env AllowCountry

</RequireAny>

https://httpd.apache.org/docs/2.4/mod/mod_authz_core.html#requiredirectives

⭐ BotGuard (https://botguard.net) ⭐ — защита вашего сайта от вредоносных ботов, воровства контента, клонирования, спама и хакерских атак!

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий