检查 RHEL HA 存储库

使用以下命令检查两个节点上是否启用了相应的存储库。

dnf repolist

如果缺少 HA 存储库，请使用以下命令启用它。

subscription-manager repos \
    --enable="rhel-9-for-ppc64le-highavailability-e4s-rpms"

dnf clean all

dnf repolist

安装 RHEL HA 附加软件包

通过运行以下命令在两个节点上安装所需的软件包。

dnf install -y pcs pacemaker fence-agents-ibm-powervs

请确保根据您的 Red Hat Enterprise Linux 版本安装 fence-agents-ibm-powervs软件包的最小版本：

RHEL 9

fence-agents-ibm-powervs-4.10.0-43.el9

配置防火墙服务

如果已安装并启用RHEL防火墙，请为其添加高可用性服务 firewalld.service 已安装并启用。

在两个节点上运行以下命令。

firewall-cmd --permanent --add-service=high-availability

firewall-cmd --reload

启动PCS守护进程

启动PCS守护进程，该进程用于通过PCS控制和配置RHEL HA附加集群。

在两个节点上运行以下命令。

systemctl enable --now pcsd.service

确保 PCS 服务正在运行。

systemctl status pcsd.service

为 Hacluster 用户 ID 设置密码

为 Hacluster 用户 ID 设置密码。

在两个节点上运行以下命令。

passwd hacluster

验证集群节点

使用以下命令对群集节点上的 PCS 守护进程进行用户 hacluster 身份验证。 命令提示您输入在上一步中设置的密码。

在 NODE1 上，运行以下命令。

pcs host auth ${NODE1} ${NODE2} -u hacluster

配置并启动集群节点

配置集群配置文件，并将配置同步到指定的节点。

--start 选项还可以启动节点的集群服务。

在 NODE1 上，运行以下命令。

pcs cluster setup ${CLUSTERNAME} --start ${NODE1} ${NODE2}

pcs status

创建围栏设备

STONITH是“Shoot The Other Node In The Head”的首字母缩写，可在系统崩溃时保护您的数据免遭损坏。

必须为 RHEL HA 附加生产集群启用 STONITH（围栏）。

Fence agent fence_ibm_powervs 是 Power Virtual Server 集群上唯一受支持的 STONITH 设备代理。

您必须在多区域区域中的两个工作区分别配置一个屏蔽设备。 围栏代理使用公共的 APIKEY 和 CLOUD_REGION 参数连接到 Power Cloud API。 参数 IBMCLOUD_CRN_<n>、GUID_<n> 和实例ID POWERVSI_<n> 是工作区专用的。 您可以使用在 为配置高可用性群集收集参数 一节中收集的参数来测试代理调用。

识别虚拟服务器实例以进行围栏

使用 fence_ibm_powervs 的列表选项来识别和/或验证两个集群节点的实例ID。

在任意节点上运行以下命令

fence_ibm_powervs \
    --token=${APIKEY} \
    --crn=${IBMCLOUD_CRN_1} \
    --instance=${GUID_1} \
    --region=${CLOUD_REGION} \
    --api-type=public \
    -o list

fence_ibm_powervs \
    --token=${APIKEY} \
    --crn=${IBMCLOUD_CRN_2} \
    --instance=${GUID_2} \
    --region=${CLOUD_REGION} \
    --api-type=public \
    -o list

如果虚拟服务器实例只能访问专用网络，则必须使用 --api-type=private 选项，该选项还需要一个额外的 --proxy 选项。

示例：

fence_ibm_powervs \
    --token=${APIKEY} \
    --crn=${IBMCLOUD_CRN_1} \
    --instance=${GUID_1} \
    --region=${CLOUD_REGION} \
    --api-type=private \
    --proxy=http://${PROXY_IP}:3128 \
    -o list

以下示例使用了 --api-type=private 选项。

检查两个虚拟服务器实例的状态

在两个节点上运行以下命令。

time fence_ibm_powervs \
    --token=${APIKEY} \
    --crn=${IBMCLOUD_CRN_1} \
    --instance=${GUID_1} \
    --region=${CLOUD_REGION} \
    --plug=${POWERVSI_1} \
    --api-type=private \
    --proxy=http://${PROXY_IP}:3128 \
    -o status

time fence_ibm_powervs \
    --token=${APIKEY} \
    --crn=${IBMCLOUD_CRN_2} \
    --instance=${GUID_2} \
    --region=${CLOUD_REGION} \
    --plug=${POWERVSI_2} \
    --api-type=private \
    --proxy=http://${PROXY_IP}:3128 \
    -o status

status 防火墙代理对虚拟服务器实例 --plug=<POWERVSI_n> 采取的行动显示了其电源状态。

在两个节点上，这两个命令必须报告 Status: ON。

当您为STONITH设备选择超时时，time 命令的输出可能会在以后有用。

您可以添加 -v 标志以获得详细输出，其中包含有关连接Power Cloud API和查询虚拟服务器电源状态的更多信息。

创建石器时代设备

以下命令显示了fence_ibm_powervs fencing代理的特定于设备的选项。

pcs stonith describe fence_ibm_powervs

为两个虚拟服务器实例创建stonith设备。

在 NODE1 上，运行以下命令。

pcs stonith create fence_node1 fence_ibm_powervs \
    token=${APIKEY} \
    crn=${IBMCLOUD_CRN_1} \
    instance=${GUID_1} \
    region=${CLOUD_REGION} \
    api_type=private \
    proxy=http://${PROXY_IP}:3128 \
    pcmk_host_map="${NODE1}:${POWERVSI_1}" \
    pcmk_reboot_timeout=600 \
    pcmk_monitor_timeout=600 \
    pcmk_status_timeout=60

pcs stonith create fence_node2 fence_ibm_powervs \
    token=${APIKEY} \
    crn=${IBMCLOUD_CRN_2} \
    instance=${GUID_2} \
    region=${CLOUD_REGION} \
    api_type=private \
    proxy=http://${PROXY_IP}:3128 \
    pcmk_host_map="${NODE2}:${POWERVSI_2}" \
    pcmk_reboot_timeout=600 \
    pcmk_monitor_timeout=600 \
    pcmk_status_timeout=60

虽然 fence_ibm_powervs 代理在从命令行启动时使用 api-type 作为选项，但stonith资源需要使用 api_type 创建。

使用以下命令验证配置。

pcs config

pcs status

pcs stonith config

pcs stonith status

设置石质行动集群属性

为了使电源与子网资源代理正常工作，必须将stonith-action 集群属性设置为off。 当集群执行保护操作时，它会触发 关闭操作，而不是重启被保护的实例。

更改后，您始终需要登录到 IBM Cloud 控制台，并手动启动被集群围起来的实例。

pcs property set stonith-action=off

验证更改。

pcs config

测试围栏操作

为了测试STONITH配置，手动对节点进行围栏。

在 NODE1 上，运行以下命令。

pcs stonith fence ${NODE2}

pcs status

因此，NODE2 停止。

激活 NODE2，然后在节点上启动集群，并尝试屏蔽 NODE1。

在 NODE2 上，运行以下命令。

pcs cluster start

pcs status

pcs stonith status

pcs stonith fence ${NODE1}

NODE1 停止。

激活 NODE2，然后在节点上启动集群。

在 NODE1 上，运行以下命令。

pcs cluster start

pcs status

pcs stonith status