Evlampiy, берёте цифровую камеру, открываете форточку, высовываете туда камеру, направляете её вверх и щёлкаете ... Никаких коллекций лопатить не нужно ...
Yeugeny: В целях совместимости с роботами, которые не полностью следуют стандарту при обработке robots.txt, директиву 'Host' необходимо добавлять в группе, начинающейся с записи 'User-Agent', непосредственно после директив 'Disallow'('Allow').
Откуда вы знаете как другие роботы будут реагировать на секцию, в которой есть непонятная директива (пусть даже она написана в конце секции)? Может они её будут игнорировать полностью ...
ПС Это не тот вопрос, на котором нужно зацикливаться ... Напишите десяток строк в этом файле, залейте его и забудьте про свои принципы ...
Анализируйте лучше более существенные темы ...
ПС2 Yeugeny, вы привели цитату из хелпа Яндекса. Вся соль в том, что Яндекс нормально понимает User-agent: * ... А на то как другие ПС (их роботы) отреагируют на непонятную директиву ему (Яндексу) глубоко наплевать ... Поэтому в хелпе он и пишет, что можно использовать Host в * ....
Восьмёрка какая-то на первый взгляд ...
ошибка вышла
Evlampiy, берёте цифровую камеру, открываете форточку, высовываете туда камеру, направляете её вверх и щёлкаете ... Никаких коллекций лопатить не нужно ...
Или вы в подземелье живёте?
Дык зависит от соответствия тематики (форума и рекламодателя) и посещаемости форума (целевая аудитория) ...
А Вы всегда перед ними выполняете то что "обещаете" ?
Гусары денег не берут (с)
Зачем делать именно так, а не иначе?
В целях совместимости с роботами, которые не полностью следуют стандарту при обработке robots.txt, директиву 'Host' необходимо добавлять в группе, начинающейся с записи 'User-Agent', непосредственно после директив 'Disallow'('Allow').
Откуда вы знаете как другие роботы будут реагировать на секцию, в которой есть непонятная директива (пусть даже она написана в конце секции)? Может они её будут игнорировать полностью ...
ПС Это не тот вопрос, на котором нужно зацикливаться ... Напишите десяток строк в этом файле, залейте его и забудьте про свои принципы ...
Анализируйте лучше более существенные темы ...
ПС2 Yeugeny, вы привели цитату из хелпа Яндекса. Вся соль в том, что Яндекс нормально понимает User-agent: * ... А на то как другие ПС (их роботы) отреагируют на непонятную директиву ему (Яндексу) глубоко наплевать ... Поэтому в хелпе он и пишет, что можно использовать Host в * ....
Одного никак не пойму, нафига делать в роботсе отдельный блок под Яндекс
Написать три сроки это так сложно и проблематично?
Обычно школьники и создают подобные темы, чтобы закосить за не школьника ...
Чем эта тема по глубине своего смысла отличается от приведённых в примерах?
Неправильно. Между секциями должна быть пустая строка.
User-agent: Yandex
Disallow: /cgi-bin/
Host: tyui.ru
User-agent: *
Disallow: /cgi-bin/
Disallow: /admin/
Disallow: /classes/
Disallow: /modules/
Disallow: /editor/
Disallow: /help/
Disallow: /templates/
Полностью моя работа, т.е. включая и коробочку
И рыцарь тоже?