Я как человек, который в своё время писал JS движок, скажу, что ему требуется - анализ, и интерпретация. Или оптимизация и генерация бинарного кода. Мало того, что исходники загружаются дольше бинарников, так их ещё надо парсить, что ещё сжирает время.
Вот да, отличный поинт. Нравится тебе, не нравится, но из джиэсика на фронте стараются всё же обычно побольше перформанса выжать. Потому эти ваши минификации, кложур компайлеры и прочие применять вроде как хороший тон, даже если ты на ванильке своей пишешь проект с вменяемым количеством юзеров.