GPU - это вообще не процессор общего назначения. все, что он умеет - это быстро считать трехмерные координаты множества точек. и эту его способность применяют для других математических расчетов, если сумеют
Ну совсем справедливости ради, у амд одно время gpu были на базе vliw. Но instruction set никто открывать не спешил)