Ладно "поток" это конечно громко сказано, просто имеется ввиду переходы по ссылкам от поисковика.
Вот и возникают вопросы описанные выше.
одна из проблемм это ресурсы, 150-200 новостных источника, на некоторых из них новости обновляются через каждые несколько минут ... вот и встает проблемма хранить это все или удалять, если удалять то как это работать с поисковыми системами будет.... если не индексировать тогда и меньше поток посетитетей от поисковых систем.