Во-первых, файл называется robots.txt
Во-вторых, овчинка выделки не стоит ...
А вы кому больше верите?
Откуда они берут данные?
Проанализируйте два этих вопроса и не обращайте внимания ...
Они вас сами найдут. Работайте над ссылками на сайт.
Избежать подставы в Яндексе можно спецсимволом $
Disallow: /?id=21$
Щас, только с космосом свяжемся для астрального получения информации ...
Что за домены, какая зона, возраст, история? Какие сайты, какие ссылки на них ... etc and etc ...
Конечно. Зачем пропуск сделали после User-agent?
Почему нереально? Ведь на одной странице сколько будет сцылок?
Ну зря вы так ...
Сделайте вот так и проверьте всё-таки наличие файла в корне сайта.
По адресу http://site.ru/robots.txt - он открывается?
В некоторые каталоги могут и не принять (а это, как правило, лучшие каталоги), так что не спешите.
А страничку можно и оптимизировать, хуже не будет. Сделайте ей хороший диз. Напишите тект подходящий.
Если портал готовится хороший, то пусть люди о нём узнают побольше.
