Connaissant Ceph, il est très exigeant en bande passante dès que tu retires un disque. En effet, il va mettre le cluster en mode dégradé (signifiant qu'il ne peut plus toléré une nouvelle panne sous peine de perdre des données). Et c'est là qu'il va se mettre à répliquer assez de copies sur l'ensemble des bécanes/disques encore debout pour pouvoir tolérer une nouvelle panne et se remettre en mode "sain".
Là j'ai pris l'exemple d'un petit disque, mais si on perd une bécane, voire une baie entière, là les 40Gbps seront très utiles. ;-)