С Днём Рож!
Весёлых и счастливых!
🍻
Тоже внимательно слежу. Очень интересно развитие событий дальнейших.
Ох как заморочливо это оказывается, я думал проще как-то.
ЗЫ: У моего друга есть друг, который говорил, что для этого ездил в Амстердам. Там это бесплатно делают. Что он подразумевал под словом это, я не знаю. Нужно у Бардо спросить, он ездил.
ЗЫЫ: А ТС стебётся однозначно.
Сорь за офф :)
el.fieZ, Disallow: на те папки/разделы которые требуется закрыть (по умолчанию открыты) или Allow: - открыть.
Папки/разделы/файлы выбрать самому, у каждого своя параноя.
А в тех ссылках, что давали выше всё есть.
Масол, А я чо? Ничо, абсолютно. Нормальный такой сервис, буржуйский.
И мне в пишет:
Warning at line number 20:
Crawl-delay: 10
Unrecognised field. The field Crawl-delay could not be recognised. Whilst the robots.txt standard allows for expansion by the use of undefined fields, it is likely that this line is a mistake in your file
No errors found! - это самое главное :)
el.fieZ, Когда я чего-то не знаю, появляется дикое желание это узнать. Вбиваю запрос в гугл/яндекс и о чудо! Эти сволочи знают всё! Риальне!
robots.txt
el.fieZ, Robots.txt syntax checker
RControl, Опции темы/Подписаться на эту тему, а апать её ночью бесполезно.
Вот когда совсем весь интернет выкачают и сложат на свои сервера, то может и до этого дойдёт :)
Кстати! Кто там жаловался, что гугля сайты не индексирует? Вот есть шанс попробовать через этот сервис. А вдруг?
Спалил тему 😂
Original Optimized Difference
Page Load Time 13.164s 8.582s -4.582s (34.8%)
Repeat View Page Load Time 10.348s 6.163s -4.185s (40.4%)
Тестовый сайт, главная.
Я так понимаю, что гугл выкачивает к себе на сервера весь контент и диз, и всё, в общем, а потом отдаёт быстрее как-то. В первом посте описание работы.