Это вам надо букварь по HTML почитать.
"Мы с ними встретились, как три молочных брата,
друг друга не видавшие вообще"
"Мы с ними встретились, как три рубля на водку,
и разошлись, как водка на троих".
А про уголовный кодекс:
"И сердце бьётся раненою птицей,
Когда начну свою статью читать.
И кровь в висках так ломится, стучится,
Как мусора, когда приходят брать."
Никакие блатные так никогда не напишут.
Поиском по сайту можно уточнить, нет ли формально еще других релевантных страниц на сайте.
А еще можно проверить другие поисковики (Google например), какое у них мнение.
Можно учесть возможности внутренней оптимизации. Как правило у внутренней страницы таких возможностей больше, чем у главной или у вышестоящей страницы раздела.
Да. Хоть четыре, проверено, работает. Можно экономить на длине robots.txt.
Да и в стандарте написано:
"User-agent
The value of this field is the name of the robot the record is describing access policy for.
If more than one User-agent field is present the record describes an identical access policy for more than one robot. At least one field needs to be present per record."
http://www.robotstxt.org/orig.html
User-agent: Googlebot
User-agent: Slurp
User-agent: msnbot
User-agent: Yandex
Эти четверо про звездочку знают.
Да уж, посоветовали сайт с устаревшей информацией.
И второй совет "хорош". Небось на сайте не 5 и не 10 страниц для печати, чтобы их вручную в форму вводить.
Soccerlive, либо используйте *, это понимают Яндекс, Google, Yahoo.
Либо во все страницы для печати втыкайте метатег robots="noindex" .
Кстати, а что вам помешало просто тупо заглянуть в FAQ Яндекса, как рекомендуется в правилах этого раздела?
-----------
User-agent: Google
Disallow: /*print_page=yes
FAQ Яндекса и правила этого раздела теперь читать не модно?
Давайте каждый день будем изобретать велосипед, обсуждать, спорить, сколько должно быть колес, какой они должны быть формы. А что, все при деле, чем-то будут заняты, просто прекрасно.
P.S. Топик пока не удаляю, чтобы повисел в назидание.
Тут раздел "Поисковые системы".
Все остальные интересные темы здесь не обсуждаются.
Вот именно, и не парьтесь.
Если бы вы выбирали зеркалку с набором объективов, тут можно было бы обсуждать нюансы. А для мыльницы просто берите известную марку, которая на них специализируется.
Неудивительно, ведь на сайте наверняка нет текста его URL, а ссылок с этим текстом на сайт тоже пока нет (или мало).
Да-да-да, этот "благородный" говносателлит, грубо говоря, забанят и появится очередной топик "почему мой сайт с уником пропал из Яндекса, караул, трудовую копейку в сапе перекрыли" :).
Хотя, может быть и правильно, туда ему и дорога. Но зачем же давать такие советы и провокационные приемы - мне непонятно.
