Как определить тематику сайтов?

Можно поподробнее?

Каким образом можно определить? Что за бюджетный способ, какой вы не сможете реализовать?

У меня крупная база сайтов, мне нужно раскидать сайты по категориям, но не знаю, как я это сделать. Нашёл решение от palo alto (https://www.youtube.com/watch?v=OL_yc95zeDQ), но не знаю, как это реализовать, там похоже нужно ставить их ПО (ещё и непонятно, платное оно или бесплатное), а потом уже запускать скрипт python, который будет сверять ваши домены с доменами из их базы (фаервола), если будут совпадения, то они дают информацию, к какой категории относится домен (бизнес, развлечения и т. д.).

Нашел ещё платное решение от netpeak checker, через них вроде тоже можно проверить, к какой категории относится сайт, но у меня его даже установить не получается, т. к. я из РФ (впн не помогает). 

Ещё думаю насчет того, чтобы собрать заголовки и ключи сайтов, а затем по ним определить категорию домена, но мне этот способ видится ненадежным. 

P. S. не знаете, кстати, чем собрать ключи и заголовки можно? я использую batchurlscraper, но он очень медленный

очень долго выйдет, не миллион сайтов, но много все равно 

хотя бы до 100 баксов, да ,мне типа того, что по ссылке нужно, но покачественнее (мои сайты он плохо анализирует, вернее, он вообще мне ответа не даёт, пишет bad url status, empty document или вроде того, хотя сайты нормальные и рабочие) и массово