Второе. По стандарту, хотя бы один Disallow в секции должен быть.
И, кстати, насчет Host в секции * - опять же по стандарту, неизвестные директивы должны игнорироваться, так что по большому счету все равно, как делать. Хотя, например, у Рамблера - неизвестная роботу директива/комментарий - это разделитель секции.
Сложный вопрос. Я его задал, будет ответ - выложу.
Большое спасибо. У самих, увы, до сайта руки не дошли по большому счету... :-(
Давайте мейл в личку - разберемся.
PS: mail.ru починили.
Да, звоните.
Спасибо, поправим.
Про регистрацию понял, упс, поправим.
404-х пока сам не нашел, но ищу.
Грей не даст быть неточным - мы с площадками стараемся ладить, и они в курсе наших телодвижений.
А мы это весьма изящно обошли. Детали раскрывать не буду по понятным причинам.
Смотря где.
У гугля и бегуна (когда работает) - доступно публично. У яндекса - ну мы же на то и смарт, чтобы обойтись без него.
