Если у вас вне функции, в которую передается слайс, над этим слайсом тоже происходят какие-то операции(append'ы например), то можно наткнуться на неприятность, когда слайс упрется в capacity и будет расширяться. Это может привести к изменениям адресов памяти.
Соответственно если вы ранее передали слайс без указателя, то эти адреса памяти станут невалидны