9-10 Хороший вариант. Главное чтобы с погодой промашка не вышла. Хотя плохая погода с легкостью компенсируется количеством горючего! :)
Бегать не нужно, для этого есть RSS.
Если сильно нужно, могу разработать специально для вас. Не дорого.
Сам Google допустим своих роботов на Python запрограмил. Сам пишу роботов на Perl, исправно работают. Насчет того, что памяти много кушают, ну это как написать.
У меня сегодня на ресурсе с PR4 вылез PR6 чудеса однако.
Часто в правилах каталога написано, что ставить обратную не обязательно. Но в итоге получается, что вашу ссылку просто не разместят, если обратную не поставишь. Да и еще, в большинстве случаев обратная ссылка проверяется роботом. Так что рецепт, который я приводил выше будет работать.
Бывает когда куски сайта не связаны между собой. И попасть с одного куска сайта на другой можно только через type-in, а ссылок внутри не будет.
Задача не настолько проста насколько это кажется. Существует ряд сложностей. Тупиковые пути например.
Javascript-счетчики считают только людей, т.к. в браузере который собой представляет робот Java-script не исполняется. PHP-счетчики, Perl-счетчики могут считать и роботов.
Можно разместить поначалу ссылки на каталоги на статической странице и не линкуя ее с остальными выкинуть на сайт. Потом через недельку удалить.