т.е. обрабатывать все рауты и логику реактом, а джангу использовать только в качестве REST API?
Да. Я даже с ходу не скажу как оставить логин на шаблонах, а остальное отправить в реакт. Фронт ведь куку будет тулить в хедер, а где её взять фронту, если логин на шаблонах? Понятное дело, что придумать что-то можно, но думаю не стоит