Perché tre nodi
Un cluster ha bisogno di una maggioranza per decidere chi è vivo. Con due nodi, se uno cade, l’altro non sa se quello caduto è lui. Con tre, i due che restano sono ancora maggioranza e avviano le macchine del terzo.
Ceph, lo storage distribuito, conserva per impostazione predefinita tre copie di ogni dato, una su ciascun nodo. Per questo tre è il minimo ragionevole.
La rete: la prima cosa che non basta
Ceph replica ogni scrittura attraverso la rete. Con 1 GbE il cluster funziona, ma è lento e si ingolfa durante la ricostruzione dopo un guasto. Il minimo serio è la 10 GbE, e con dischi NVMe conviene la 25 GbE.
Chiedi reti separate: una per lo storage, un’altra per le macchine virtuali e un collegamento a parte, anche solo a 1 GbE, per la comunicazione interna del cluster. Con tre nodi, la rete di storage può essere una maglia diretta tra loro, senza switch.
Dischi: SSD da server, senza RAID
Ceph gestisce i dischi da solo, quindi non si usa un controller RAID: i dischi vanno collegati direttamente. E devono essere SSD di classe enterprise con protezione dalle interruzioni di corrente. Con SSD consumer, le prestazioni in scrittura crollano e la vita del disco si accorcia.
Poiché le copie sono tre, la capacità utile è circa un terzo del totale, e conviene non superare l’80% di occupazione.
Memoria e processore
Oltre alla memoria delle macchine virtuali, ogni disco di Ceph riserva diversi gigabyte di memoria per il suo servizio. Con quattro dischi per nodo, conta circa 16-32 GB solo per lo storage. Sempre ECC.
Nel processore contano i core: quelli delle macchine virtuali più uno o due per disco. E ricorda che il cluster deve reggere con un nodo in meno: gli altri due devono farcela con tutto.
Nodi uguali
I tre nodi devono essere identici: stesso processore, stessa memoria, stessi dischi. Così le macchine si spostano dall’uno all’altro senza sorprese e lo storage resta bilanciato. Li assembliamo in serie, con gli stessi componenti e la stessa versione di firmware, e li proviamo insieme.
| Piattaforma | Per quale cluster | Da |
|---|---|---|
| Server Ryzen | Cluster piccolo: poche macchine virtuali e 10 GbE | 1.285 € |
| Server EPYC | Da 16 a 64 core per nodo, memoria a sei canali e IPMI | 3.561 € |
| Server EPYC 9005 | Fino a 96 core e 1,5 TB per nodo, per decine di macchine | 6.152 € |
Il prezzo di ogni nodo dipende da memoria, dischi e schede di rete. Te lo diamo chiuso con la configurazione completa.
Se il budget non basta: due nodi e replica
Per una piccola azienda c’è un’opzione più semplice: due nodi con replica ZFS ogni pochi minuti e una terza macchina minima che si limita a votare. Non è alta disponibilità istantanea, perché si perdono i minuti dall’ultima replica, ma costa molto meno ed è facile da mantenere.
Hardware e guide correlati
Domande frequenti
Posso fare un cluster con due nodi?
Sì, con una piccola terza macchina che faccia da arbitro e la replica ZFS al posto di Ceph. Ceph ha bisogno di tre nodi veri per lavorare in sicurezza.
Ceph o ZFS?
Ceph dà una vera alta disponibilità: se cade un nodo, le macchine proseguono con i dati aggiornati. Richiede tre nodi, rete veloce e SSD da server. ZFS con replica è più semplice ed economico, e perde gli ultimi minuti se un nodo cade.
Basta la rete a 1 GbE?
Per lo storage di Ceph, non in produzione. Va bene per il collegamento interno del cluster e per la gestione. Lo storage richiede almeno la 10 GbE.
Posso mescolare server diversi?
Funziona, ma complica la vita di tutti i giorni: le macchine non sempre migrano a caldo tra processori diversi e lo storage resta sbilanciato. Tre nodi uguali risparmiano molti problemi.
Dimensioniamo il tuo server?
Dicci quante persone siete, quali programmi usate e quanti dati avete. Ti proponiamo il server per iscritto, con il prezzo, entro 12 ore lavorative.