ну, значит 70% результата уже есть)
запускайте контейнеры-workerы в очередях... вообще на всех компах домена, будут потреблять 1-2% у юзверя на заднем плане... получите на большую организацию - примерно тысячу постоянных воркеров. 😂
У меня смешной опыт разбора pdf-файлов: логика не параллелится, один файл грузит ядро на 100%. Спасибо за такую диверсию ждать не приходится)