я пишу про свой сайт https://wmsn.biz/ ссылки есть на урл вида /addmicro.php?p=124616&to=6307 т.е. с гет параметрами, но яндекс дал ссылку на /addmicro.php (хотя может рел каноникал сработал) также была ссылка на биллинг /billing.php на который точно ни откуда нету ссылок и их видят только авторизованные юзеры. Но обоих урлов в индексе нету, хз зачем на них ссылался яндекс и как нашел урл биллинга.
avatar2020, у вас полное непонимание того зачем это надо и как работает, лучше пока ничего не прикручивать, т.к. скорее всего вы внесете этим много вреда, без Last-Modified все отлично работает.
stalk319, у меня такие же страницы закрыты в robots.txt и php хедер X-Robots-Tag: noindex
ссылки на них есть только для авторизованных пользователей. Метрики не стоит.
В индексе страниц этих нету, но в быстрых ссылках они появились. Удалил вручную. Появились новые, которые или 301 или 404 имеют код ответа сервера, у яндекса крыша едет.
Тоже в "быстрых ссылках" вчера заметил ссылки на страницы "биллинг" и "написать в блог", которые видны только авторизованным юзерам и которые были запрещены к индексации.
актуальная ссылка есть на предыдущей странице.
smart2web, возможно и нет, все whois уже показывали днс клауда и к ним шло обращение, но именно они выдавали что не знают такого домена.
LazyBadger, 150 млн уников в сутки - это более чем достаточная статистика, и собственно по твоей же ссылке тоже самое, все 3 сервиса статистики подтверждают, браузеры мелкософта это не больше 3% (включая ботов на движке ie) потому заморачиваться под оптимизацию под них - врятли найдутся проекты, для которых это экономически целесообразно. И даже если кто-то реально юзает IE/EDGE - они привыкли страдать и видеть еще более кривые сайты, чем просто еле заметная полоска или не так отображенные пару пикселей.
P.S. и пример нерепрезентативной микро выборки. я на своем сайте wmsn.biz проводил анализ, из авторизованных юзеров за последние пол года на сайт заходило 3 человека в браузерах мелкософта (это вообще 0% если округлить), зато как начался http флуд на сайт- среди ддос ботов сплошняком были на базе ie, потому у меня msie вообще забанен на уровне nginx, кроме антиддос эффекта еще и от дикого количества левых ботов избавился, которые постоянно что-то парсили, брутили и создавали прочую нездоровую движуху на сайте.---------- Добавлено 12.06.2018 в 11:14 ----------LazyBadger, HotLog заброшенный сервис, он остался только на старых заброшенных сайтах, на которых часто еще можно найти приписку в стиле "сайт оптимизирован под разрешение 1024х768 и браузер IE 6" :D С OpenStat не знаком, но LiveInternet к примеру ботов отлично фильтрует, лучше чем мейловский счетчик и метрика, потому именно LiveInternet у меня вызывает больше доверия, чем другие сервисы статистики.
В общем отвечу что получилось.
Саппорт ответил что у них все норм, сделав dig со своего компа, host-tracker.com им не авторитет ))) Но и домены по прошествии 3-4 дня заработали. На новых доменах ошибка при этом точно также повторяется. Так что если юзать Cloudflare, то нужно быть готовым, что столько много дней сайты будут тупить пока на серверах клаудовских днс нормально появятся данные. При этом точно такие же домены-свежереги но на своих днс начинали работать моментально и хост-трекер через час уже показывает все норм.
Да ваша самоуверенность привела вас к "упс, обосрался". признаете это?
https://www.liveinternet.ru/stat/ru/oses.html оси.
https://www.liveinternet.ru/stat/ru/browsers.html браузеры, найдите там оба браузера мелкософта, но не забудьте еще отнять ботов, которые тоже часто ходят под браузером IE. Если округлить, то IE и EDGE всех версий пользуются только в объеме "запустить, чтоб скачать нормальный браузер".
Внесу свое гадание: мобильный интернет (не быстрый) + опера турбо с экономией трафа + сайт за клаудфлар = тоже многие сайты не открываются.
