Смотря что делает этот мастер))
Скорее, возможность вывести в ТОП новые сайты, нежели их индексацию :)
Ну роботс дополнительно как страховка не помешает, по крайней мере от зазеркаливания на левые домены))
Т.е. на днях вы закрываете систему для новых пользователей? Иначе, исходя из ваших слов, каждый новый пользователь будет ухудшать результаты предыдущих. 😆😂
Ну вы запрос бы еще адекватнее подобрали - была бы еще "релевантнее" выдача....
Адресно? Ок) Мы же не будем брать все, так? Иначе оценка будет не адекватной. Как минимум, нам нужно проверить все найденные беки на индексацию в Яндексе, правильно? Представляете, сколько нам нужно сделать запросов к Яндексу? Сколько нужно ИП, так как банятся они нещадно? И все это ради того, чтобы немного скорректировать оценочную стоимость?
И это я привел лишь первую причину, которая пришла на ум)
И какие это источники? Яху?
Как оценить "не продажные" ссылки? Сколько стоит 200 ссылок с каталогов сайтов? Как выявить сетки сателлитов (если они грамотно сделаны)?
Были (хотя, пока они еще есть) идеи интеграции с Язлом, но на данный момент стоят более приоритетные задачи по увеличению эффективности доноров например.
Отвечу немного корректнее (хотя и вопросом) - вы представляете какие ресурсы нужны, чтобы иметь возможность индексировать РУнет?
И как же вы определите на автомате не уникальный дизайн?))
И давно у вас так?