Pourquoi trois nœuds
Un cluster a besoin d’une majorité pour décider qui est en vie. Avec deux nœuds, si l’un tombe, l’autre ne sait pas si c’est lui qui est en panne. Avec trois, les deux restants forment toujours une majorité et démarrent les machines du troisième.
Ceph, le stockage réparti, conserve par défaut trois copies de chaque donnée, une sur chaque nœud. C’est pourquoi trois est le minimum raisonnable.
Le réseau : la première chose qui devient insuffisante
Ceph réplique chaque écriture par le réseau. En 1 GbE le cluster fonctionne, mais il est lent et s’engorge lors de la reconstruction après une panne. Le minimum sérieux est le 10 GbE, et avec des disques NVMe le 25 GbE est conseillé.
Demandez des réseaux séparés : un pour le stockage, un autre pour les machines virtuelles et un lien à part, même en 1 GbE, pour la communication interne du cluster. Avec trois nœuds, le réseau de stockage peut être un maillage direct entre eux, sans commutateur.
Disques : des SSD de serveur, sans RAID
Ceph gère lui-même les disques, donc on n’utilise pas de contrôleur RAID : les disques sont connectés directement. Et il faut des SSD de classe entreprise avec protection contre les coupures de courant. Avec des SSD grand public, les performances en écriture s’effondrent et la durée de vie du disque se réduit.
Comme il y a trois copies, la capacité utile est à peu près un tiers du total, et il vaut mieux ne pas dépasser 80 % d’occupation.
Mémoire et processeur
Outre la mémoire des machines virtuelles, chaque disque Ceph réserve plusieurs gigaoctets de mémoire pour son service. Avec quatre disques par nœud, comptez environ 16 à 32 Go rien que pour le stockage. Toujours de l’ECC.
Pour le processeur, ce sont les cœurs qui comptent : ceux des machines virtuelles plus un ou deux par disque. Et rappelez-vous que le cluster doit tenir avec un nœud en moins : les deux autres doivent tout assumer.
Des nœuds identiques
Les trois nœuds doivent être identiques : même processeur, même mémoire, mêmes disques. Ainsi les machines passent de l’un à l’autre sans surprise et le stockage reste équilibré. Nous les montons en série, avec les mêmes pièces et la même version de firmware, et nous les testons ensemble.
| Plateforme | Pour quel cluster | À partir de |
|---|---|---|
| Serveur Ryzen | Petit cluster : quelques machines virtuelles et 10 GbE | 1 285 € |
| Serveur EPYC | De 16 à 64 cœurs par nœud, mémoire sur six canaux et IPMI | 3 561 € |
| Serveur EPYC 9005 | Jusqu’à 96 cœurs et 1,5 To par nœud, pour des dizaines de machines | 6 152 € |
Le prix de chaque nœud dépend de la mémoire, des disques et des cartes réseau. Nous vous le donnons ferme avec la configuration complète.
Si le budget ne suffit pas : deux nœuds et réplication
Pour une petite entreprise, il existe une option plus simple : deux nœuds avec réplication ZFS toutes les quelques minutes et une troisième machine minimale qui ne fait que voter. Ce n’est pas de la haute disponibilité instantanée, car on perd les minutes écoulées depuis la dernière réplication, mais cela coûte bien moins cher et s’entretient facilement.
Matériel et guides associés
Questions fréquentes
Puis-je monter un cluster avec deux nœuds ?
Oui, avec une petite troisième machine qui fait l’arbitre et une réplication ZFS à la place de Ceph. Ceph a besoin de trois vrais nœuds pour travailler en sécurité.
Ceph ou ZFS ?
Ceph offre une vraie haute disponibilité : si un nœud tombe, les machines continuent avec leurs données à jour. Il demande trois nœuds, un réseau rapide et des SSD de serveur. ZFS avec réplication est plus simple et moins cher, et perd les dernières minutes si un nœud tombe.
Un réseau en 1 GbE suffit-il ?
Pour le stockage Ceph, pas en production. Il convient pour le lien interne du cluster et pour l’administration. Le stockage demande au moins du 10 GbE.
Puis-je mélanger des serveurs différents ?
Cela fonctionne, mais complique le quotidien : les machines ne migrent pas toujours à chaud entre processeurs différents et le stockage se déséquilibre. Trois nœuds identiques évitent bien des problèmes.
On dimensionne votre serveur ?
Dites-nous combien vous êtes, quels logiciels vous utilisez et combien de données vous avez. Nous vous proposons le serveur par écrit, avec son prix, en moins de 12 heures ouvrées.