В идеале, как только написан первый тест - у тебя сразу должен быть пайплайн где этот тест регулярно запускается, или по графику, или по другому тригеру (например при каждом билде). И все, добавляя новые тесты в код, они автоматом добавляются в пайплайн и постоянно запускаются. В идеале - вообще без участия человека, а автоматически и регулярно. Но это идеальный мир. А на практике - все зависит от компании