Excellente question, dont je n'ai pas la réponse.
Le cluster ceph est à 3 nœuds, comme le cluster proxmox, et il a été créée, et qualibré, lors de l'installation du cluster.
Les VM sont sauvegardées périodiquement sur un volume SMB Synology.
Je n'éteinds pas le cluster. Il arrive parfois que je tombe un voir 2 noeuds, que je remonte, et le cluster ceph retombe sur ses pattes et repart sans erreurs.
Il est intégralement géré via l'interface de Proxmox, et je ne suis jamais intervenu manuellement dessus, sauf pour les procédures de mises à jour pour lesquelles j'ai suivi les procédures de la doc Proxmox, dont j'ai acheté le support 3 nœuds, de façon à bénéficier du support, des dépôts, les assurer de mon soutien et m'assurer du leur.
Vu que tout est sauvegardé, j'ai raté une fois, il y a 2 ans, une séquence, et j'ai préféré réinstaller from scratch.
L'intégration à Proxmox est remarquable.
Ceph est une technologie transgressive et remarquablement redondante, tout dépend des curseurs de comment on l'installe.
La fine administration de Ceph, dont je ne manipule pas les entrailles à la main fréquemment, exige réflexion.
J'ai opté de suivre les procédures de la doc Proxmox, qui sont claires et aussi sécurisées que possible.