Premesso che come spiegato nella sezione di preparazione delle macchine ho ricompilato il kernel senza il supporto dei moduli, aggiungo qui che nella compilazione ho inserito il supporto per drbd.
\nA questo punto devo installare il software necessario per realizzare i device drb al solito e come pi\u00f9 volte specificato e sottolineato sin ora l’operazione deve essere eseguita su entrambe le macchine in successione, per pura comodit\u00e0 qui user\u00f2 solo sangiorgio, ma le stesse identiche operazioni vanno eseguite immediatamente dopo anche su perseo(l’altra macchina).
\nsangiorgio:~# apt-get -t squeeze-backports install drbd8-utils che al solito si installa e si tira dietro le necessarie dipendenze.
\nAvendo installato le utility per drbd passiamo a creare l’ambiente per poter creare e mettere in funzione i device necessari.
\nil primo passo \u00e8 mettere a posto il networking (DRBD \u00e8 RAID1 over TCP) quindi nel file \/etc\/hosts di entrambe le macchine dobbiamo avere :<\/p>\n
127.0.0.1\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 localhost
\n192.168.2.240\u00a0\u00a0 perseo.oceano.lan\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 perseo
\n192.168.2.10\u00a0\u00a0\u00a0 cluster.oceano.lan\u00a0\u00a0\u00a0\u00a0\u00a0 cluster
\n192.168.2.239\u00a0\u00a0 sangiorgio.oceano.lan\u00a0\u00a0 sangiorgio
\n192.168.2.241\u00a0\u00a0 proxy.oceano.lan\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 proxy
\n192.168.10.239\u00a0 drbd1
\n192.168.10.240\u00a0 drbd2<\/p>\n
in altre parole l’IP statico delle 2 macchine e delle 2 schede di rete dedicate al DRBD<\/p>\n
e nel file \/etc\/networks<\/p>\n
default\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 0.0.0.0
\nloopback\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 127.0.0.0
\nlink-local\u00a0\u00a0\u00a0\u00a0\u00a0 169.254.0.0
\nlocalnet\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 192.168.2.0
\noceano.lan\u00a0\u00a0\u00a0\u00a0\u00a0 192.168.2.0
\ndrbd\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 192.168.10.0
\ndmz\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 192.168.200.0<\/p>\n
Ovviamente i valori da aggiungere sono da tarare sulle specifiche esigenze di ogni rete e nel mio caso sono quelli dopo localnet.<\/p>\n
Il file che governa i device drbd \u00e8\u00a0 \/etc\/drbd.conf\u00a0 e deve essere assolutamente uguale su entrambe le macchine<\/span>, nel mio caso contiene:<\/p>\n #include “drbd.d\/global_common.conf”; common { resource r0 {<\/p>\n protocol C;<\/p>\n handlers { disk { }<\/p>\n net { syncer { on perseo { vediamo in dettaglio le varie sezioni del file.<\/p>\n global { common { La sezione comune non e’ strettamente necessaria ma e’ consigliata se si hanno piu’ risorse, in modo da far si che tutte le risorse configurate ereditino questa opzione nello specifico e’ la velocita’<\/p>\n r0 startup { questa e’ un’istruzione molto importante perch\u00e8 in buona sostanza dice che al boot il sistema resta in attesa di un intervento umano per poter continuare (wfc-timeout\u00a0 0;) infatti al boot quando compare la scritta waiting for e il n\u00b0 dei secondi che passa bisogna essere sulla console e digitare yes al che il boot continua senza problemi. per la spiegazione dettagliata dei parametri sotto elencati si veda man drbdsetup<\/p>\n disk { } net { con questa sezione diciamo alla rete come trasferire i pacchetti, imponiamo la condizione di non poter avere 2 primary e diciamo cosa fare sempre a livello di rete cosa fare in caso di split-brain<\/p>\n syncer { si lo so che e’ una condizione gi\u00e0 imposta prima ma repetita juvant \ud83d\ude42<\/p>\n on sangiorgio { }<\/p>\n on perseo { in questa sezione definiamo invece la risorsa su entrambi i nodi e pi\u00f9 precisamente il nome della risorsa (drbd0) su quale disco fisico in questo caso una partizione lavora (\/dev\/sda10),l’indirizzo della eth dedicata (ecco perch\u00e8 lo abbiamo messo anche in \/etc\/hosts), la porta su cui lavora e il tipo di meta disk.<\/p>\n Ripeto una volta di pi\u00f9 che \u00e8 assolutamente essenziale procedere di pari passo su entrambe le macchine. Found ext3 filesystem Device size would be truncated, which Command ‘drbdmeta 0 v08 \/dev\/sda10 internal create-md’ terminated with exit code 40 Niente da fare non c’\u00e8 spazio, la cosa piu’ comoda e veloce da fare \u00e8:
\n#include “drbd.d\/*.res”;
\nglobal {
\nusage-count yes;
\n}<\/p>\n
\nsyncer { rate 100M; }
\n}<\/p>\n
\npri-on-incon-degr “echo o > \/proc\/sysrq-trigger ; halt -f”;
\npri-lost-after-sb “echo o > \/proc\/sysrq-trigger ; halt -f”;
\nlocal-io-error “echo o > \/proc\/sysrq-trigger ; halt -f”;
\noutdate-peer “\/usr\/lib\/heartbeat\/drbd-peer-outdater -t 5”;
\npri-lost “echo pri-lost. Have a look at the log files. | mail -s ‘DRBD Alert’ clark@oceano.lan”;
\nsplit-brain “echo split-brain. drbdadm — –discard-my-data connect $DRBD_RESOURCE ? | mail -s ‘DRBD Alert’clark@oceano.lan”;
\n}
\nstartup {
\nwfc-timeout\u00a0 120;
\ndegr-wfc-timeout 120;\u00a0\u00a0\u00a0 # 2 minutes.
\n#become-primary-on both;
\n}<\/p>\n
\non-io-error\u00a0\u00a0 detach;<\/p>\n
\nmax-epoch-size 16000;
\nmax-buffers 16000;
\nunplug-watermark 128;
\nsndbuf-size 524288;
\n#allow-two-primaries;
\nafter-sb-0pri discard-zero-changes;
\nafter-sb-1pri discard-secondary;
\nafter-sb-2pri disconnect;
\nrr-conflict disconnect;
\n}<\/p>\n
\nrate 100M;
\n#al-extents 1801;
\n# 3389
\n}
\non sangiorgio {
\ndevice\u00a0\u00a0\u00a0\u00a0 \/dev\/drbd0;
\ndisk\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 \/dev\/sda10;
\naddress\u00a0\u00a0\u00a0 192.168.10.239:7788;
\nmeta-disk\u00a0 internal;
\n}<\/p>\n
\ndevice\u00a0\u00a0\u00a0 \/dev\/drbd0;
\ndisk\u00a0\u00a0\u00a0\u00a0\u00a0 \/dev\/sda10;
\naddress\u00a0\u00a0 192.168.10.240:7788;
\nmeta-disk internal;
\n}
\n}<\/p>\n
\nusage-count yes;
\n}
\nQuesta sezione si usa una sola una volta, preferibilmente nella parte superiore del file di configurazione. Tra le poche opzioni disponibili in questa sezione, solo uno \u00e8 di rilevanza per la maggior parte degli utenti:
\nusage-count yes serve in buona sostanza a crere delel statistiche
\nQuesto viene fatto contattando un server HTTP ogni volta che viene installato una nuova versione DRBD su un sistema. Questo pu\u00f2 essere disabilitato impostando uso-count no;.
\nle statistiche sono disponibili su http:\/\/usage.drbd.org.<\/a><\/p>\n
\nsyncer { rate 100M; }
\n}<\/p>\n
\ne’ la prima risorsa e specifichiamo il modo di replicazione col protocollo C che in sostanza dice che la replicazione e’ sincrona, cioe’ la scrittura locale e’ considerata finita solo quando si ha avuto conferma che su entrambi i nodi e’ avvenuta.
\nnon mi dilungo sulla spiegazione degli handlers li potete trovare sul sito di drbd<\/p>\n
\nwfc-timeout\u00a0 0;
\ndegr-wfc-timeout 120;\u00a0\u00a0\u00a0 # 2 minutes.
\n#become-primary-on both;
\n}<\/p>\n
\nSe si mette un valore questo e’ espresso in secondi e dopo il n\u00b0 di secondi indicato il boot continua per suo conto, ho lasciato disabilitata questa opzione perche’ se per caso ci sono dei problemi di rete dovuti a uno switch che e’ andato a $escort, piuttosto che a problemi di tensione o altro si corre il serio rischio di trovarsi con le 2 macchine che tentano di diventare primarie contemporaneamente, questo sarebbe un vero grosso guaio in quanto lo “split-brain” \u00e8 matematicamente sicuro e la probabilit\u00e0 di perdere dati altissima, pertanto preferisco che le macchine stiano ferme sino a che io o un qualcun altro che conosce la procedura sblocchi la questione quando siamo sicuri che il problema e’ rientrato\/risolto.<\/p>\n
\non-io-error\u00a0\u00a0 detach;<\/p>\n
\nserve per ottimizzare le propriet\u00e0 di drbd nei confronti dello storage di basso livello
\nnello specifico il nodo droppa il suo dispositivo di basso livello e continua in modalit\u00e0 diskless<\/p>\n
\nmax-epoch-size 16000;
\nmax-buffers 16000;
\nunplug-watermark 128;
\nsndbuf-size 524288;
\n#allow-two-primaries;
\nafter-sb-0pri discard-zero-changes;
\nafter-sb-1pri discard-secondary;
\nafter-sb-2pri disconnect;
\nrr-conflict disconnect;
\n}<\/p>\n
\nrate 100M;
\n#al-extents 1801;
\n# 3389
\n}<\/p>\n
\ndevice\u00a0\u00a0\u00a0\u00a0 \/dev\/drbd0;
\ndisk\u00a0\u00a0\u00a0\u00a0\u00a0\u00a0 \/dev\/sda10;
\naddress\u00a0\u00a0\u00a0 192.168.10.239:7788;
\nmeta-disk\u00a0 internal;<\/p>\n
\ndevice\u00a0\u00a0\u00a0 \/dev\/drbd0;
\ndisk\u00a0\u00a0\u00a0\u00a0\u00a0 \/dev\/sda10;
\naddress\u00a0\u00a0 192.168.10.240:7788;
\nmeta-disk internal;
\n}
\n}<\/p>\n
\n\u00c8 arrivato il momento di generare i dispositivi drbd cosa che facciamo con un:
\nsangiorgio:\/etc# drbdadm create-md r0
\nmd_offset 24996589568
\nal_offset 24996556800
\nbm_offset 24995790848<\/p>\n
\n24410736 kB data area apparently used
\n24409952 kB left usable by current configuration<\/p>\n
\nwould corrupt data and result in
\n‘access beyond end of device’ errors.
\nYou need to either
\n* use external meta data (recommended)
\n* shrink that filesystem first
\n* zero out the device (destroy the filesystem)
\nOperation refused.<\/p>\n
\ndrbdadm create-md r0: exited with code 40<\/p>\n