Google сам подставляет ошибочный Robots.txt

N2
На сайте с 25.04.2024
Offline
2
#51
Там и Яндекс заблокирован в роботс
W1
На сайте с 22.01.2021
Offline
293
#52
complex200 #:
Техподдержка просто поражает

Вас кто-то заставляет держать там сайты?
И кстати, где ты был 5 лет?

Мой форум - https://webinfo.guru –Там я всегда на связи
complex200
На сайте с 23.05.2019
Offline
37
#53

...И кстати, где ты был 5 лет?

Я не писатель, я читатель...

Softg
На сайте с 19.09.2012
Offline
100
#54
complex200 #:

Хостинг hoster.ru и hts.ru - это теперь  технически ОДНА организация (см. контакты)
Подмена файла robots.txt для поисковых Google ботов идёт во всех проектах. В файлах - Запрет к индексации поставлен для всего доменного имени и указывают директорию индексации свои сайты

User-Agent: Yandex
Disallow: /
Host: www.hts.ru

User-Agent: Googlebot
Disallow: /

User-Agent: *
Disallow: /

Всем коммерческим сайтам с SEО политикой - обратить внимание!

Техподдержка просто поражает - рассказы про "блокировку" ботов Google  для первичной защиты от Ddos-атак 
Но при чём тут подмена файлов robots.txt  с запретом индексации???????

Юридически - закона о блокировке поисковых ботов НЕТ, есть только "рекомендация". Кто-то бежит впереди паровоза? Ну и убежит от своих же клиентов

Так зачем они блокируют Яндекс и всех остальных ботов ?

complex200
На сайте с 23.05.2019
Offline
37
#55
Может просто не знают? В поиске спросили как заблокировать сайт от индексации в robots.txt  - им выдали код

Вопрос в другом... Зачем им вообще всё это надо, если письмо из Роскомнадзора - это только рекомендация? Они понимают, что клиенты уйдут?
Vladimir SEO
На сайте с 19.10.2011
Online
1742
#56
complex200 #:
Зачем им вообще всё это надо, если письмо из Роскомнадзора - это только рекомендация? Они понимают, что клиенты уйдут?
вы у них спросите и потом сюда напишите, реально интересно
Эксперт по продуктам Google https://support.google.com/profile/58734375 ᐈ Продвижение коммерческих сайтов https://kulinenko.com/
богоносец
На сайте с 30.01.2007
Offline
756
#57
Softg #:

Так зачем они блокируют Яндекс и всех остальных ботов ?

И нахрена при  этом в ихнем роботсе отстало-православный Content-Type: text/plain; charset=windows-1251 ?

Вам же написали для каких ботов подмена, а "все остальные" могут это узнать только при подмене для них.

Vladimir SEO
На сайте с 19.10.2011
Online
1742
#58
DemonF2005 #:
hts.ru

Один форумчанин сравнил контакты хостера и хтс


и

какие тут могут быть еще вопросы))

htexture
На сайте с 29.05.2017
Offline
202
#59
Vladimir SEO #:

Могут сослаться на указ/приказ. Мол теперь всем так надо. Не ответить не могут. 

Указа приказа нету, есть лишь рекомендации. Турбопатриоты в хостингах решили проявить смекалку и быть первыми. Прошелся по ру сайтам, не у всех. Там где видно что сайт на дедике, такого нету, а вот на хостингах где паршивые сдл проекты попадаются с блокировкой. Причем я насколько понял, подмену они делают таким способом, для ру айпи, обычный роботс, для остальных айпи с диссейловом. Для меня с украинским айпи с домашнего пк, вижу диссейлов.
Vladimir
На сайте с 07.06.2004
Online
537
#60
complex200 #:
Вопрос в другом... Зачем им вообще всё это надо, если письмо из Роскомнадзора - это только рекомендация? Они понимают, что клиенты уйдут?

Вашем случае письмо из Роскомнадзора ни при чем.
Вам же хостер дал прямой ответ на ваш вопрос

complex200 #:
"блокировку" ботов Google  для первичной защиты от Ddos-атак 
Но при чём тут подмена файлов robots.txt  с запретом индексации???????

Запрет индексации уменьшает траф ботов Яндекса и Гугла до нуля.
Защита от Ddos-атаки😭

Аэройога ( https://vk.com/aeroyogadom ) Йога в гамаках ( https://vk.com/aero_yoga ) Аэройога обучение ( https://aeroyoga.ru ) и просто фото ( https://weandworld.com )

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий