Сверло рассчитано на обороты дрели, но никак не мотора от фрезера.
Там все вместе влияет, сверло при очень низких оборотах - оказывает большое сопротивление, при высоких аналогично. То есть нужно ровно те обороты и те подачи, которые запроектированы изготовителем сверла. Все довольно печальнее будет, если ваш станок выгибается при нужных параметрах.