В большем случае их никто не учитывает.
Но если есть время, то написать не помешает ;)
Если прямая, то почему нет.
Вот только учтет ли ее поисковик...
Нет конечно, если только на эти страницы нет ссылок на других сайтах.
Хотя, были случаи, когда даже robots.txt Gooogle игнорировал.
Пользы от того, что гугл ходит по этим ссылкам нет.
Вот если бы не ходил , то я бы тут же весь дизайн запхнул во внешний файл, а оставил только текст на странице ;)
У кого и 16 дней, а кто то и без add_url за 2 дня это может сделать ;)
Аналогично, но не думаю, что причина в этом.
Так уже недели две как :)
http://kako.yandex.ru/cgi-bin/test-robots?host=%E2%E0%F8
Поискать руками или прогой.
Похоже, что обновили ссылки, заодно и выдачу.