Для сайтмапа необязательно указывать юзер агент, так как гугл тоже это понимает. Я лично делаю хитрее стравливаю sitemap.xml, а в роботс прописываю sitemap.xml.gz, и сразу видно когда и кто подцепил... т.е. тогда в яндекс вебмастер висит ссылка от пользователя и ссылка которую нашел робот :)))
А если ко всему этому добавить еще и одну биржу... не буду говорить какую, она позволяет внедрять код и продажу ссылок на основе .htaccess, то тогда вообще сказка будет...
Вообще идея на мой взгляд интересная... и действительно надо смотреть в корень происходящего... Опять таки на своем примере могу сказать, что многие друзья перебираются ко мне на хостинг, правда без каких либо вмешательств в их сайт... но тенденция есть...
Сталкивался с подобной проблемой... скорее всего слишком велико время отклика... попробуйте подождать... иногда около 3 дней, и как только фидбарнер съест.. .пробуйте добавить в яндекс. Как я понял из всего что было у меня... это такой "замечательный" хостинг.
А вот еще одна закономерность, попробуйте в разное время добавлять... если все дело в хостинге, то может быть слишком большая нагрузка на сервер и превышен таймаут, у меня было так...
100% апп.. правда не очень серьезный... из 150 запросов... на 120 подвижки +/- 2-3 позиции
И у меня нулевку конкурентной тематики раскупают с удовольствием... а про не нулевки так вообще молчу
Неплохая биржа, которая может занять сейчас скажем так "пустующую" нишу.... Из плюсов на мой взгляд: быстрая реакция суппорта, доброжелательность, условия работы, неплохой и постоянно расширяющийся функционал... из недостатков: пока маловато площадок для оптимитизаторов, но если учесть время появление и постоянный рост участников, то скоро все изменится так, что спишем его на временный недостаток...
Совсем забыл.. простота настройки данной биржи...
P.S. У кого проблемы с кодом на wordpress милости прошу качать мой плагин Edaddy_Uniplace
P.S.S. Своим рефам помогаю!!! :)