- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
После подключения сайта к Cloudflare изменились ip Googlebotа (в логах).
До этого ip ботов Гугла были разные для каждого типа бота.
После абсолютно все гуглоботы (независимо от типа) ломятся исключительно с одного адреса (который принадлежит Гуглу), но ранее этот адрес никогда не светился в логах - 66.249.64.83.
Это договорняк Гугла с Cloudflare?
После подключения сайта к Cloudflare изменились ip Googlebotа (в логах).
До этого ip ботов Гугла были разные для каждого типа бота.
После абсолютно все гуглоботы (независимо от типа) ломятся исключительно с одного адреса (который принадлежит Гуглу), но ранее этот адрес никогда не светился в логах - 66.249.64.83.
Это договорняк Гугла с Cloudflare?
Здравствуйте. Сделайте вот это - https://support.cloudflare.com/hc/en-us/articles/200170706-How-do-I-restore-original-visitor-IP-with-Nginx-
И все вернется как было, проверено. Cloudflare проксирует через свои IP (частично находятся в IP ranges Гугла) все подряд, вышеуказанный костыль в nginx включает назад определение реальных IP.
webmasteryoda, спасибо добрый человек.
Только вот в том списке нет сети, с которой бот ко мне приходит.
Это договорняк Гугла с Cloudflare?
А что удивительного, в чем вопрос.проблема? Зашёл нормальный бот с другого ip, у гугла их много. Видимо этому ip короче до cloudflare стучаться, чем тем которые до этого были к вам, интернет так устроен.
Оптимизайка, ничего удивительного) Просто до этого все гуглоботы (по типам) шли с разных адресов, а теперь все с одного.
webmasteryoda, спасибо добрый человек.
Только вот в том списке нет сети, с которой бот ко мне приходит.
Как только включите тот костыль, будут разные IP Гуглбота, как и обычно. У нас так. Почему с включенным проксированием боты передаются через один IP, которого нет в списке сетей Cloudflare - хз.
И, честно говоря, не понимаю в чем проблема. Пусть себе ходит с любого айпи, лишь бы ходил.
webmasteryoda, я немного разобрался с ситуацией.
За костыль спасибо, но никакого отношения к гуглоботам в этом контексте он не имеет. Он всего лишь ретранслирует заголовки Клаудфлары CF-Connecting-IP/X-Forwarded-For в стандартный заголовок nginx real_ip.
В Апаче то же самое по дефолту делает mod_remoteip.
Боты Яндекса бегают со своих родных ip, и немного новых ip прибавилось.
Гуглобот, когда узнал о Клаудфларе, начал бегать с другого ip, который ближе - спасибо Оптимизайка, разъяснил, а я проверил.
Нет, это бот, умеющий обрабатывать защиту CloudFlare от DDoS и исполняющий JS.
С этой же подсети /24 ходит проверяльщик Google Ads