ну, то есть, мухи отдельно, котлеты отдельно хочешь заходить просто по ssh на сервак - пихаешь в /home/ivan/.ssh/authorized_keys свой ключ и потом пишешь ssh ivan@server
я искал authorized_keys поиском. это единственное место, где есть этот файл на серваке. сервак гитлаба - это докер-контейнер gitlab/gitlab-ce:9.3.3-ce.0 поэтому есть отличия от обычного сервака с линухом. папка /home/ вообще пустая. а как посмотреть конфиг sshd ?