"Робот-зеркальщик прошёл модернизацию. Теперь если склейка-расклейка зеркал не происходит более 2 недель, смело пишите в службу поддержки."
http://twitter.com/funsad/status/27933705874
Пустой перевод строки после директивы "Crawl-delay" ни к чему.
Отсутствие параметров у директивы трактуется следующим образом:
По умолчанию к концу каждого правила, описанного в robots.txt, приписывается '*'.
Отлично. Не Мойша, а Изя, не сто рублей, а трешку, не в бильярд, а в преферанс, не выиграл, а проиграл. :)
Microsoft Excel. ;)
C 10 декабря.
С непрекращающимся штормом в выдаче.
http://analyzethis.ru/?analyzer=update&searcher=rambler&interval=year
C хостингом проблем не было?
Если быть точным, то
разрешает 'Allow:', а 'Disallow:' не запрещает. ;)
А раньше могли? 🚬
"Робот-зеркальщик прошёл модернизацию. Теперь если склейка-расклейка зеркал не происходит более 2 недель, смело пишите в службу поддержки."
http://twitter.com/funsad/status/27933705874
Так, куда точно (между чем и чем) надо поставить host: site.ru и sitmap , чтобы сайт видел и яндекс и гугл?
Пустой перевод строки после директивы "Crawl-delay" ни к чему.
Может что-то подправить надо?
Отсутствие параметров у директивы трактуется следующим образом:
Disallow: # тоже что и Allow: /
User-agent: Yandex
Allow: # тоже что и Disallow: /
Disallow: /*?*
Disallow: /*?
По умолчанию к концу каждого правила, описанного в robots.txt, приписывается '*'.
Отлично. Не Мойша, а Изя, не сто рублей, а трешку, не в бильярд, а в преферанс, не выиграл, а проиграл. :)
п/с Нужен софт, которые может показывать распределение ссылочной массы на страницы сайта
Microsoft Excel. ;)
Это давно так?
C 10 декабря.
с чем может быть связано?
С непрекращающимся штормом в выдаче.
http://analyzethis.ru/?analyzer=update&searcher=rambler&interval=year
C хостингом проблем не было?
Disallow: разрешает к индексации
Disallow: / запрещает к индексации
Если быть точным, то
разрешает 'Allow:', а 'Disallow:' не запрещает. ;)
Кстати не могу ввести регион "Россия". wtf?
А раньше могли? 🚬