Подскажите, почему Google видит закрытую в robots.txt ссылку

сразу видно что везде  бегает и за всеми подметает, ну разве не видно что мне впадло лезть на сайт и в бивать руками robots.txt )) , - хай кидает сюда весь роботс - что бы всем сразу было видно ))

если тс поленился сразу это сделать - то почему мне нельзя ?

Видать нравится человеку это занятие.

Тебе не впадлу писать кучу бессмысленных  текстов на кучке форумов, а набрать/скопипастить "robots.txt" впадлу. Угу-угу. :)

Опять повторю - проф. навыки/привычки - они или есть или нет. И это видно по постам.

Во первых это без разницы. Во вторых, даже так страница доступна.

https://zap-online.ru/robots.txt прошу. С советом по решению ситуации.

Потому что "учите матчасть, дети!" С какой такой дозы горилки ты, хлопчик, решил, что у тебя "ссылки закрыты"? Читайте уже документацию, штоле, а не "модных блогиров", что происходит, когда есть less-specific User-agent и User-agent: *

В результате, как и ожидается

robots.txt: https://zap-online.ru/robots.txt (200 OK)

URL Path: /info/comment/reply/83/3606

Result: Allowed

Потому что у тебя, чудо, именно для Googlebot создано одно единственное правило

Allow: /info/*?

с прямым разрешением "ходи смотри"

у вас же для гугла сделан отдельный блок ))и там разрешено, а все что разрешено то не запрещено )

выше вот умный товарищ тебе написал и указал

зачем вообще делать три блока для гугла, для яндекса и для когото еще - если всего две ПС важны ?

Севладичка Я вот по этому весь роботс и хотел взглянуть - ибо знал что в невидимой на скрине части есть интересный вариант

Это как? (а вы с его привычками знакомы?)