там же очень много действий постоянных и пересчетов. не уверен, что можно сильно батчить
Можно даже замерить копирование массивов, вполне вероятно не так много и ждать. Например у тебя CPU проставивает 5мс из-за копирования, но при этом GPU отдыхает и ему не важно что данные придут чуть позже, а глаз не заметит.