Большой кластер?

выйдем на 18 нод

А цеф какой?

ceph: 14.2.11-pve1

pve-manager: 6.2-14 (running version: 6.2-14/2001b502)

В датацентр-сторэдж добавить рбд, убрать галку про гиперконвегент, назвать какнить, указать пул, мониторы перечислить, придумать другое имя пользователя.
Потом в /etc/pve/priv/ceph добавить ключ от другого кластера.
Но нужно пробовать, сам не пробовал :)

как обновишься - скажешь, ибо я так на 6.2 с 6.1 угробил пару серваков, но все же интересно

Из доки:

If you use cephx authentication, you need to copy the keyfile from your external Ceph cluster to a Proxmox VE host.
Create the directory /etc/pve/priv/ceph with
mkdir /etc/pve/priv/ceph
Then copy the keyring
scp <cephserver>:/etc/ceph/ceph.client.admin.keyring /etc/pve/priv/ceph/<STORAGE_ID>.keyring
The keyring must be named to match your <STORAGE_ID>. Copying the keyring generally requires root privileges.
If Ceph is installed locally on the PVE cluster, this is done automatically by pveceph or in the GUI.

у меня было пару серваков тестовых. без проблем с 5.4 прошел 6.0-6.2 сейчас один доступен остался - обновил на 6.3, но пока не ребутал. фатальных проблем никогда не было.

If you use cephx authentication, you need to copy the keyfile from your external Ceph cluster to a Proxmox VE host.
Create the directory /etc/pve/priv/ceph with
mkdir /etc/pve/priv/ceph
Then copy the keyring
scp <cephserver>:/etc/ceph/ceph.client.admin.keyring /etc/pve/priv/ceph/<STORAGE_ID>.keyring
The keyring must be named to match your <STORAGE_ID>. Copying the keyring generally requires root privileges.
If Ceph is installed locally on the PVE cluster, this is done automatically by pveceph or in the GUI.

даже имя видимо admin можно оставить

у меня упал в кернел паник и я хрен ложил, всё с 0 свежее поднял, что оказалось быстрее и лучше

кхм, а ядра старые даже не пробовал запускать ?

нет,мне надо было поднять назад хостинг с 10м сайтов, потому я быстро все это сделал и на другом сервере, а который лёг просто с 0 засетапил

но кстати, у меня завалились оба сервера на софт рейде 1, а вот на серваках с рейд контроллером - все ок обновилось

а на это давняя проблема с mdadm+lvm встречается не только на проксе, кстати.

😕

напиши

Видимо да, вариантов нет

главное, не на пхп и не на node

Golang

ruby, ибо опенебула вроде уже на ней