Preparazione HA LVM attivo-passivo

Su entrambi i nodi, modificare il file /etc/lvm/lvm.conf per includere l'ID di sistema nel gruppo di volumi. Cerca l'impostazione di configurazione " system_id_source " e cambia il suo valore in "uname".

Esempio di impostazione di system_id_source in /etc/lvm/lvm.conf:

# grep "system_id_source ="  /etc/lvm/lvm.conf
system_id_source = "uname"

Verificare che l' LVM system ID e per il nodo corrisponda all'output dell' uname -n.

lvm systemid

uname -n

Output di esempio:

# lvm systemid
  system ID: cl-nfs-1
# uname -n
  cl-nfs-1

Identificazione dei nomi World Wide Names dei volumi di archiviazione condivisi

Identificare i nomi World Wide Names (WWN) per tutti i volumi utilizzati nel gruppo di volumi condivisi.

1. Accedi a IBM Cloud® e vai alla sezione Storage volumes di Power Virtual Server.

2. Selezionare l'area di lavoro.

3. Filtra per il prefisso del volume nell 'elenco dei volumi di archiviazione e identifica tutti i nomi universali dei volumi nell'ambito (il nome universale è un numero esadecimale a 32 cifre).

   Assicurati che l'attributo Condivisibile sia attivo per quei volumi.

4. Nella vista Istanze del server virtuale, vai a entrambe le istanze del server virtuale del cluster e verifica che i volumi di ambito siano collegati a entrambe le istanze del server virtuale.

Creazione di volumi fisici

Su NODE1, eseguire il seguente comando.

pvcreate /dev/mapper/${NFS_PVID}

Output di esempio:

pvcreate /dev/mapper/${NFS_PVID}
  Physical volume "/dev/mapper/360050768108103357000000000002ddc" successfully created.

Creazione di un gruppo di volumi

Su NODE1, creare il gruppo di volumi per l'esportazione dell' NFS.

vgcreate ${NFS_VG} /dev/mapper/${NFS_PVID}

Verificare che l'ID sistema sia impostato.

vgs -o+systemid

Output di esempio:

# vgs -o+systemid
  VG          #PV #LV #SN Attr   VSize   VFree   System ID
  nfssharevg    1   0   0 wz--n- <50.00g <50.00g cl-sap-1

Creazione di volumi logici

Su NODE1, creare tre volumi logici per l'esportazione dell' NFS.

lvcreate -l ${NFS_SZ1} -n ${NFS_LV1} ${NFS_VG}

lvcreate -l ${NFS_SZ2} -n ${NFS_LV2} ${NFS_VG}

lvcreate -l ${NFS_SZ3} -n ${NFS_LV3} ${NFS_vg}

Creazione dei file system

Su NODE1, creare i file system per le esportazioni di NFS.

L'esempio utilizza il tipo di file system xfs. Sono possibili altri tipi di file system. Quindi, le definizioni delle risorse devono essere modificate.

mkfs.xfs /dev/${NFS_VG}/${NFS_LV1}

mkfs.xfs /dev/${NFS_VG}/${NFS_LV2}

mkfs.xfs /dev/${NFS_VG}/${NFS_LV3}

Creazione del punto di montaggio per l'esportazione dell' NFS

Su entrambi i nodi, eseguire il seguente comando.

mkdir -p ${NFS_FS1}

Assicurarsi che un gruppo di volumi non sia attivato su più nodi cluster

I gruppi di volume gestiti da un Pacemaker e non devono attivarsi automaticamente all'avvio.

Per RHEL 8.5 e versioni successive, è possibile disabilitare l'attivazione automatica per un gruppo di volumi quando si crea il gruppo di volumi specificando il flag --setautoactivation n per il comando vgcreate.

Su entrambi i nodi, modificare il file /etc/lvm/lvm.conf e modificare la voce " auto_activation_volume_list " per limitare l'attivazione automatica a gruppi di volumi specifici. Cerca il parametro " auto_activation_volume_list " e aggiungi i gruppi di volumi, diversi dal gruppo di volumi che hai definito per il cluster " NFS ", come voci in tale elenco.

Esempio di impostazione della voce " auto_activation_volume_list " in " /etc/lvm/lvm.conf":

auto_activation_volume_list = [ "rhel_root" ]

Ricostruisci l'immagine di avvio initramfs per assicurarti che l'immagine di avvio non attivi un gruppo di volumi controllato dal cluster.

Su entrambi i nodi, eseguire il seguente comando.

dracut -H -f /boot/initramfs-$(uname -r).img $(uname -r)

Riavvia entrambi i nodi.

Creazione della risorsa LVM-activate

Per assicurarsi che tutte le risorse dell' NFS e funzionino sullo stesso nodo, configurarle come parte del gruppo di risorse nfsgroup.

Questo gruppo di risorse viene creato con la prima risorsa. Le risorse iniziano nell'ordine in cui vengono aggiunte al gruppo. Le risorse si arrestano in ordine inverso.

Su NODE1, eseguire il seguente comando.

pcs resource create nfs_vg ocf:heartbeat:LVM-activate \
    vgname=${NFS_VG} \
    vg_access_mode=system_id \
    --group nfsgroup

Per evitare il danneggiamento dei dati, non configurare più di una risorsa di attivazione LVM che utilizza lo stesso gruppo di volumi LVM in una configurazione HA attiva-passiva. Non configurare una risorsa LVM-activate come risorsa clone in una configurazione HA attiva-passiva.

Controllare lo stato del cluster e verificare che l' nfs_vg e delle risorse sia attiva.

Su NODE1, eseguire il seguente comando.

pcs resource status

Output di esempio:

# pcs resource status
  * Resource Group: nfsgroup:
    * nfs_vg    (ocf::heartbeat:LVM-activate):   Started cl-nfs-1

Il seguente comando configura le risorse del file system dell' xfs e per il gruppo di risorse dell' nfsgroup e. I file system utilizzano il gruppo di volumi LVM ${NFS_vg} e i volumi logici (${NFS_LV1}, ${NFS_LV2}, ${NFS_LV3}) creati in precedenza.

Su NODE1, eseguire il seguente comando.

pcs resource create nfs_fs1 Filesystem \
    device=/dev/${NFS_VG}/${NFS_LV1} \
    directory=${NFS_FS1} \
    fstype=xfs \
    --group nfsgroup

È possibile specificare le opzioni di montaggio come parte della configurazione delle risorse per una risorsa del file system utilizzando il parametro options=<options>. Visitare il sito pcs resource describe filesystem per un elenco completo delle opzioni di configurazione.

Controllare lo stato del cluster e verificare che l' nfs_fs1 e delle risorse sia attivo.

pcs resource status

Output di esempio:

# pcs resource status
  * Resource Group: nfsgroup:
    * nfs_vg    (ocf::heartbeat:LVM-activate):   Started cl-nfs-1
    * nfs_fs1   (ocf::heartbeat:Filesystem):     Started cl-nfs-1

Sul nodo con il gruppo di risorse attivo nfsgroup, creare due sottodirectory in ${NFS_FS1}. ${NFS_FS1}/stat è utilizzato come nfs_shared_infodir per le informazioni di blocco dell' NFS e e ${NFS_FS1}/export è utilizzato come root dell' NFS.

mkdir ${NFS_FS1}/stat ${NFS_FS1}/export

Creare i punti di montaggio per gli altri file system esportati.

Su entrambi i nodi, eseguire il seguente comando.

mkdir ${NFS_FS2} ${NFS_FS3}

Creare le risorse per gli altri due file system dell' NFS.

Su NODE1, eseguire i seguenti comandi.

pcs resource create nfs_fs2 Filesystem \
    device=/dev/${NFS_VG}/${NFS_LV2} \
    directory=${NFS_FS2} \
    fstype=xfs \
    --group nfsgroup

pcs resource create nfs_fs3 Filesystem \
    device=/dev/${NFS_VG}/${NFS_LV3} \
    directory=${NFS_FS3} \
    fstype=xfs \
    --group nfsgroup

Controlla lo stato del cluster e verifica che tutte e tre le risorse del file system (nfs_fs1, nfs_fs2, nfs_fs3) siano attive.

pcs resource status

Output di esempio:

# pcs resource status
  * Resource Group: nfsgroup:
    * nfs_vg    (ocf::heartbeat:LVM-activate):   Started cl-nfs-1
    * nfs_fs1   (ocf::heartbeat:Filesystem):     Started cl-nfs-1
    * nfs_fs2   (ocf::heartbeat:Filesystem):     Started cl-nfs-1
    * nfs_fs3   (ocf::heartbeat:Filesystem):     Started cl-nfs-1

Creazione della risorsa nfsserver

Su NODE1, creare una risorsa per la gestione del server NFS.

pcs resource create nfs_daemon nfsserver \
    nfs_shared_infodir=${NFS_FS1}/stat \
    nfs_no_notify=true \
    --group nfsgroup

Il parametro nfs_shared_infodir della risorsa nfsserver specifica una directory in cui il server NFS memorizza le informazioni relative allo stato.

Controllare lo stato del cluster e verificare che il server NFS sia avviato.

pcs resource status

Output di esempio:

# pcs resource status
  * Resource Group: nfsgroup:
    * nfs_vg    (ocf::heartbeat:LVM-activate):   Started cl-nfs-1
    * nfs_fs1   (ocf::heartbeat:Filesystem):     Started cl-nfs-1
    * nfs_fs2   (ocf::heartbeat:Filesystem):     Started cl-nfs-1
    * nfs_fs3   (ocf::heartbeat:Filesystem):     Started cl-nfs-1
    * nfs_daemon        (ocf::heartbeat:nfsserver):      Started cl-nfs-1

Creazione della risorsa exportfs

Per esportare la directory ${NFS_ROOT}, aggiungere le risorse exportfs al gruppo nfsgroup, che crea una directory virtuale per i client NFSv4. NFSv3 anche i clienti possono accedere a queste esportazioni.

Su NODE1, eseguire il seguente comando.

pcs resource create nfs_export exportfs \
    clientspec=${NFS_CLIENTSPEC} \
    options=${NFS_OPTIONS} \
    directory=${NFS_ROOT} \
    fsid=0 \
    --group nfsgroup

Configurazione di una risorsa di indirizzo IP flottante

Rivedere le informazioni in Riservare indirizzi IP virtuali e riservare un indirizzo IP virtuale per il cluster dell' NFS.

Creare una risorsa per l'indirizzo IP virtuale del server NFS. NFS i clienti accedono alla condivisione dell' NFS, utilizzando l'indirizzo IP flottante.

Su NODE1, eseguire il seguente comando.

pcs resource create nfs_ip IPaddr2 \
    ip=${NFS_IP} \
    --group nfsgroup

Configurazione di una risorsa di notifica

La risorsa nfsnotify invia FSv3 notifiche di riavvio dopo l'inizializzazione dell'intera distribuzione di NFS.

Su NODE1, eseguire il seguente comando.

pcs resource create nfs_notify nfsnotify \
    source_host=${NFS_IP} \
    --group nfsgroup

L'installazione del cluster dell' NFS e è ora completa.

Su NODE1, eseguire il seguente comando per controllare lo stato.

pcs resource status

Output di esempio:

# pcs resource status
  * Resource Group: nfsgroup:
    * nfs_vg    (ocf::heartbeat:LVM-activate):   Started cl-nfs-1
    * nfs_fs1   (ocf::heartbeat:Filesystem):     Started cl-nfs-1
    * nfs_fs2   (ocf::heartbeat:Filesystem):     Started cl-nfs-1
    * nfs_fs3   (ocf::heartbeat:Filesystem):     Started cl-nfs-1
    * nfs_daemon        (ocf::heartbeat:nfsserver):      Started cl-nfs-1
    * nfs_export        (ocf::heartbeat:exportfs):       Started cl-nfs-1
    * nfs_ip    (ocf::heartbeat:IPaddr2):        Started cl-nfs-1
    * nfs_notify        (ocf::heartbeat:nfsnotify):      Started cl-nfs-1

Test2- Descrizione

Simulare un crash del nodo cluster che ha le risorse dell' NFS.

Test2- Prerequisiti

• Un cluster add-on RHEL HA a due nodi funzionale per un server HA dell' NFS.
• Il cluster viene avviato su entrambi i nodi.
• I file system sono montati su un nodo client dell' NFS, al di fuori del cluster, e le applicazioni possono accedere al contenuto.

Test2- Procedura di prova

Blocca il nodo del cluster inviando una richiesta di spegnimento del sistema.

Per prima cosa, controlla lo stato del cluster e identifica il nodo in cui è in esecuzione il gruppo di risorse nfsgroup.

Su NODE1, eseguire il seguente comando.

pcs status

Quindi, accedere al nodo cluster identificato e inviare una richiesta di arresto anomalo del sistema.

sync; echo c > /proc/sysrq-trigger

Test2- Comportamento previsto

• Il nodo con il gruppo di risorse nfsgroup attivo si spegne.
• Il cluster rileva il nodo guasto e avvia un'azione di recinzione.
• L'operazione di recinzione imposta lo stato del nodo recintato su offline.
• Il cluster acquisisce le risorse del server NFS sul nodo di failover.

Verificare che tutte le risorse siano state avviate sul nodo di failover.

pcs resource status

Output di esempio:

# pcs resource status
  * Resource Group: nfsgroup:
    * nfs_vg    (ocf::heartbeat:LVM-activate):   Started cl-nfs-2
    * nfs_fs1   (ocf::heartbeat:Filesystem):     Started cl-nfs-2
    * nfs_fs2   (ocf::heartbeat:Filesystem):     Started cl-nfs-2
    * nfs_fs3   (ocf::heartbeat:Filesystem):     Started cl-nfs-2
    * nfs_daemon        (ocf::heartbeat:nfsserver):      Started cl-nfs-2
    * nfs_export        (ocf::heartbeat:exportfs):       Started cl-nfs-2
    * nfs_ip    (ocf::heartbeat:IPaddr2):        Started cl-nfs-2
    * nfs_notify        (ocf::heartbeat:nfsnotify):      Started cl-nfs-2

Verificare che il file system sia ancora montato sul nodo client dell' NFS, e che le applicazioni possano ancora accedere al contenuto.

Test2- Procedura di recupero

Accedi alla console di IBM Cloud e avvia l'istanza interrotta. Attendere che il nodo del cluster sia nuovamente disponibile, quindi riavviare il framework del cluster.

Sul nodo del cluster, eseguire il seguente comando.

pcs cluster start

Controllare lo stato del quadro strumenti.

pcs status

Output di esempio:

# pcs status
Cluster name: SAP_NFS
Cluster Summary:
  * Stack: corosync
  * Current DC: cl-nfs-1 (version 2.0.5-9.el8_4.5-ba59be7122) - partition with quorum
  * Last updated: Mon Mar 20 08:11:28 2023
  * Last change:  Mon Mar 20 07:56:25 2023 by hacluster via crmd on cl-nfs-1
  * 2 nodes configured
  * 9 resource instances configured

Node List:
  * Online: [ cl-nfs-1 cl-nfs-2 ]

Full List of Resources:
  * res_fence_ibm_powervs	(stonith:fence_ibm_powervs):	 Started cl-nfs-1
  * Resource Group: nfsgroup:
    * nfs_vg	(ocf::heartbeat:LVM-activate):	 Started cl-nfs-2
    * nfs_fs1	(ocf::heartbeat:Filesystem):	 Started cl-nfs-2
    * nfs_fs2	(ocf::heartbeat:Filesystem):	 Started cl-nfs-2
    * nfs_fs3	(ocf::heartbeat:Filesystem):	 Started cl-nfs-2
    * nfs_daemon	(ocf::heartbeat:nfsserver):	 Started cl-nfs-2
    * nfs_export	(ocf::heartbeat:exportfs):	 Started cl-nfs-2
    * nfs_ip	(ocf::heartbeat:IPaddr2):	 Started cl-nfs-2
    * nfs_notify	(ocf::heartbeat:nfsnotify):	 Started cl-nfs-2

Daemon Status:
  corosync: active/disabled
  pacemaker: active/disabled
  pcsd: active/enabled