Да можете снижать, можете не снижать, если у вас работает. Только вы должны понимать, что смысла в таком кэше нет. Даже 200. Если у вас стабильная скорость, то всё будет работать и на кэше 32.
Тут дело в другом. Вы читаете и знаете название настроек, но, почему-то не понимаете их назначение. Вы ставите кэш 300 и при этом буфер предзагрузки 100% и потом жалуетесь, что у вас долго фильм стартует. Буфер предзагрузки 100% рекомендуется (и то не всегда) при малом кэше. А при большом какой смысл сидеть и ждать, пока у вас закачается все 300 МБ?