Из панели вебмастера
[ATTACH]23317[/ATTACH]
Бегающий яндексоидный тицоповышатель
Клоакинг, он родимый
И не только Яндекс и не только фаерфоксом
Это поговорка
или заработать (;
Быстроробот
> Почему Яндекс отказывается искать по поисковым фразам?
Я уж думал Апокалипсис начался
Звездочка по умолчанию подразумевается, если доллар не стоит
Если поставите звездочку - хуже не будет
Впаривать вирусню и накручивать счетчики?
так оно правильней будет:
User-Agent: * Disallow: Crawl-Delay: 1
Боты, поддерживающие директиву Crawl-Delay, будут запрашивать страницы не чаще, чем по 1-й в секунду
