Если это сильно больно, то можно настроить зеркало для фетча в локальной сети.
Сам не пробовал, но говорят что достаточно просто.
Там конечно либо некоторое запаздывание изменений либо +1 комманда при скачивании, но если проблема со скоростью критична, то почему бы нет.
У нас было такое зеркало на старой работе, у меня было выкачивание через скрипт который фетчил сначала с зеркала, потом с удаленного репозитория, и потом делал нужные манипуляции.