У вьюх, которые Вы используете, много доп элементов (под которые выделяется место, лэйбел, текст ошибки, ещё что-то) и он не помещается в тот размер, который Вы определили (64dp). Именно этот набор вьюх не сделать такой маленькой, как Вы хотите. Либо кастомизировать вью, либо брать обычный editText, он поменьше.