если прям невозможно работать с темой из за тормозов, то конечно не тратить время. но по скорости самой отдачи, то тут точно связи нет, кроме как огромных ресурсов на статике... в любом случае, взять wp rocket, связать напрямую с nginx, и пополам какая тема стоит... сервак будет отвечать со скоростью 50-70мс, загрузка до 0.5с с cdn. так еще и нагрузки на сервак не будет... а делов рально на час...
купил wp rocket на черную пятницу и отдал обратно через 2 дня, с LiteSpeed Cache бесплатным, результаты лучше были