ну вот это тож не хочется делать,хочется какой-то управляемый сценарий который рботает для 95% таблиц, на объемах до 1тб, чтобы как то это все масштабировалось, написано на языке программирования, являлось программой, а не скриптом
Поясните чего вы хотите? Вы можете писать через JDBC коннект (в том числе используя протокол Fastload) в одну таблицу, вы можете писать используя пачку JDBC процессов в разные таблицы (используя Fastload или без него) или писать из пачки процессов в одну таблицу (но тогда Fastload протокол не будет работать, эти сессии являются конкурентной записью как в любой другой базе), или вы можете использовать многопоточную утилиту батч лоада поставив ее шагом в вашем воркфлоу (вы все ваши пайплайны называете скриптами? Или пишете каждый огромным монолитным джобом?) или использовать специальный коннектор чтобы писать из вашего джоба многопоточным батчевым лоадером
