Купил программу. Отлично справляется с возложенными на неё задачами. Работает быстро, при этом сообщает, что делает в данный момент. Лог файл очень удобный - всё чётко расписано, всегда можно выбрать и исправить нужные кеи. Очень понравилась возможность делать выборку по количеству слов.
Доволен :)
Всех приветствую. Поискал в Яндексе сайты на pochta.ru, нашёл сайт какой-то институтской группы, то есть вполне белый. Потом мебельную фабрику нашёл. Так вот robots.txt такой же отдаётся. Они блокировали все сайты на данный момент получается.
