Я не программист конечно, но даже если он каждый кадр будет Vector3 сохранять разве оно как-то посадит производительность
не в производительности дело, позиция может быть к тому моменту не валидна(моб например заспавнился). Запоминать поз в апдейти может быть норм решение, я незнаю контекста проблемы