ясно..
ну значит я как неисправимый идеалист.. выдавал желаемое, за недействительное...
хотя справку пора уже обновить этому ПС Гугл... никаких директив которые управляют скоростью обхода сайта краулером уже нет.. ПС Гугл отказалась от этого инструмента...
а эвристика этого алгоритма в Гугл парашная.. задолбал гугл перегружать VDS своими повышенными частотами доступа в секунду... ну нет возможности у людей распределять нагрузку на сотни VDS .. одного сайта как это делают гиганты ИТ отрасли..
эти "умники" "Богоподобные".. лучше пусть посмотрят.. а попку они так же вытирают как простые смертные? золотые унитазы не в счет...
Влад, да хрен знает сколько времени уже прошло с момента покупки.. может лет 10.. возможно дропы, кто мне их всучил.. а я наивный купил... поддерживал их ссылочное закупками с Сапы, Миралинкс... и чёрт его знает как...
давно уже в Янде напротив одного дропа красуется НОЛЬ его значение ИКС..
сомневаюсь что Индексаторы тех или иных ПС не смотрят.. что там в noindex завернуто.. хотя бы для того, чтобы а сколько пикселей по Ш и Г занимает блок и понять Индексатору.. а че делать с этим дерьмом в ноуиндекс... вырезать, заливать область белым цветом или цветом фона... много вопросов.. так называющие себя и превознесшие себя на Олимп из ПС... Богами ... не расскажут что они делают с тем что в ноуиндекс.. а то что об этом расскажут может оказаться ЛОЖЬЮ...
можно ссылки на официальные документы ПС, что роботс тхт - это РЕКОМЕНДАЦИЯ?
ну, я имел ввиду.. что от доменов нужно избавляться... раз они владельцу мешают... не сразу взять и прекратить DNS для них поддерживать..
тут уже советовали.. перманентный редирект конечно делать.. а если ссылочное на ненужные сейчас домены осталось.. то нужно тянуть домены до конца дней основного домена..
я просто дропы покупал.. их ссылочное уже давно обнулилось.. собираюсь дропы выкинуть на помойку...
вам скинуть и рассказать как CF использовать для предельно совершенной защиты от ботов?
инструкции в интернете в этом вопросе - говно! я сам по ним сначала настраивал CF.. но они оказались говном.. несколько сайтов подключенных к РСЯ улетели в перманентный бан...
я своим умом дошел до предела совершенства... и теперь ботность на сайтах великолепная.. ну, т.е. низкая...
счастливчик!
ничего не вернулось с начала лета.. как ушло.. боты засрали весь Интернет....
на мой взгляд ботами нужно заниматься на государственном уровне в РуНете... так же как преступлениями в области мошенничества. кражи денег, хакинга...
т.е. те, кто создает вредоносную нагрузку на сети (ботов запускает в Интернет).... блокировать по типу капчи (мягко).. выявлять кто это делает.. и беседовать с авторами этих сервисов если они в России в офисе ФСБ Отдел К...
идиотский алго... т.к. рекомендации, а я бы их назвал не рекомендациями, а директивами строго приказывающими делать то что хочет сайт.. я о роботс тхт обязан быть превыше всего...
потому что тупость получается.... я делаю закрытую зону сайта.. административную... Гугл Хром фиксирует посещение этого раздела.. стучит в Гугл Поиск.. что страница посещаемая.. и как дятел Гугл Индексатор будет долбиться в страницу , чтобы ее проиндексировать.. а раздел запаролен..
идиотизм от Гугла.. увы... настоящих умов даже и в Гугле уже нет... видимо все ушли в программирование ИИ.. принципы на которых они основаны ведущие в Тупик...
Разум устроен по другому.. не так как ЧатДжиПиТи...
убейте все старые копии сайта... они достаточно трастовые из за давности времени...
Янд вроде на взлёте... а бесить его навязчивая всплывающая реклама на самих же сервисах Янда не перестает...
когда Янд начнет полураспадать? хочу чтобы Гугл поиск в РуНете 90% занимал нишу...