文档目录

物理基础设施运维

本章主要针对物理基础设施给出的运维方法。生产环境的运维操作,需要参考此文档所述流程进行规范化操作,否则会引发不可控风险。

机房电力运维

机房计划性关机下电

机房计划性关机下电步骤如下:
  1. 停止所有运行的业务,确保所有云主机已经关机。
  2. 将所有主存储进入维护模式。
  3. 将所有物理主机进入维护模式。
  4. 停止管理节点,不同场景停止管理节点的方法如下:
    • 若采用单管理节点方案,执行zstack-ctl stop停止管理节点
    • 若采用多管理节点物理机高可用方案,在每个管理节点执行zsha2 stop-node停止管理节点并关闭zsha2服务
  5. 确保云平台主存储没有IO操作后,在各物理机执行sync & poweroff正常关闭所有物理机。
  6. 关闭存储(NFS/Ceph/SAN/SMP等)。
  7. 关闭交换机及其他硬件设施。

机房计划性上电开机

机房计划性上电开机步骤如下:
  1. 开启交换机电源。
  2. 开启存储电源(NFS/Ceph/SAN/SMP等)。
  3. 开启服务器电源。
  4. 检查管理节点服务状态,确保管理节点服务启动成功。不同场景检查管理节点的方法如下:
    • 若采用单管理节点方案,执行zstack-ctl status查看管理节点状态
    • 若采用多管理节点物理机高可用方案,在其中一个节点执行zsha2 status查看高可用状态和管理节点状态
  5. 登录ZStack Cloud云平台,启用所有主存储和所有物理机,确保物理机和主存储是已连接状态。
  6. 启动业务云主机,恢复业务。

机房意外断电恢复

机房意外断电恢复步骤与计划性上电步骤相同,如下:
  1. 开启交换机电源。
  2. 开启存储电源(NFS/Ceph/SAN/SMP等)。
  3. 开启服务器电源。
  4. 检查管理节点服务状态,确保管理节点服务启动成功。不同场景检查管理节点的方法如下:
    • 若采用单管理节点方案,执行zstack-ctl status查看管理节点状态
    • 若采用多管理节点物理机高可用方案,在其中一个节点执行zsha2 status查看高可用状态和管理节点状态
  5. 登录ZStack Cloud云平台,启用所有主存储和所有物理机,确保物理机和主存储是已连接状态。
  6. 启动业务云主机,恢复业务。

机房搬迁运维

机房搬迁请参考以下步骤操作:
  1. 将所有电源正常关闭。
  2. 标记所有交换机接线接入端和物理机接入端接口。
  3. 封装打包服务器,搬迁服务器到新机房并接线。
  4. 将所有电源开启。
  5. 检查网络、云平台及业务云主机恢复状态。

交换机运维

管理网络交换机运维

管理网络交换机运维,可能影响业务正常运行,请谨慎操作。若必须运维,建议调整在业务波谷进行。运维步骤如下:
  1. 云平台全局设置关闭云主机高可用。
  2. 停止管理节点,不同场景停止管理节点的方法如下:
    • 若采用单管理节点方案,执行zstack-ctl stop停止管理节点
    • 若采用多管理节点物理机高可用方案,在每个管理节点执行zsha2 stop-node停止管理节点并关闭zsha2服务
  3. 调整重启相关的管理交换机。
  4. 检查交换机接入端的所有硬件资源IP连通性(物理机、主存储、镜像服务器),确保所有接入端管理网络正常通信。
    Note: 若存在节点无法连通管理节点,请处理故障后继续进行后续操作。
  5. 启动并检查管理节点服务状态,确保管理节点服务启动成功。不同场景启动检查管理节点的方法如下:
    • 若采用单管理节点方案,执行zstack-ctl start启动管理节点服务,执行zstack-ctl status查看管理节点状态
    • 若采用多管理节点物理机高可用方案,在两个管理节点分别执行zsha2 start-node启动管理节点服务,在其中一个节点执行zsha2 status查看高可用状态和管理节点状态
  6. 确保所有物理机和主存储均是已连接,云平台全局设置开启云主机高可用。

业务网络交换机运维

业务网络交换机运维建议调整在业务波谷进行,避免影响重要业务。运维步骤如下:
  1. 将接入此交换机相关的物理机进入维护模式。
  2. 调整重启相关的业务交换机。
  3. 启用处于维护模式状态的某一物理机,检查连通性。例如:使用此物理机创建一个测试云主机,检查此云主机与其他业务云主机连通性,连通表示此物理机对应的交换机接口配置正确可用,如果不可达,则需继续排查连通性。
  4. 重复步骤3,依次检查连通性,确保所有的业务网络均可用;

存储网络交换机运维

存储网络交换机运维会直接影响所有业务,必须停止业务后进行操作。运维步骤如下:
  1. 将云平台上所有与此存储交换机关联的主存储进入维护模式。
  2. 登录企业版存储UI,点击设置 > 禁止数据恢复 > 禁止按钮。
  3. 调整重启相关的存储交换机。
  4. 确保所有存储节点的存储网络可互相连通并可达。
  5. 登录企业版存储UI,点击设置 > 允许数据恢复 > 启用按钮。
  6. 启用处于维护模式状态的主存储,确保主存储是已连接状态。
  7. 启动已经停止的业务云主机。
运维手册 | 4.8.38 | ZStack Cloud · ZCF | ZStack 资源中心