На форумах разрабы отвечают, что единственный путь связывать свой сервак на котором реализуется авторизация вк. Так же я нашел вот такой костыль с которым не нужен свой сервак и авторизация использует способ емэйл/пароль с зависимостью от аккаунта вк конкретного пользователя, но как это работает пока не понял https://ru.stackoverflow.com/questions/667654/Авторизация-vk-в-связке-с-firebase