同步备库正常，主库和异步备库故障
处理时序图：
处理过程说明：
| 序号 | 类型 | 执行方 | 操作过程说明 | 如何验证成功 |
|---|---|---|---|---|
| 1 | 人工 | DBA | 调用HAS停止命令停止HAS和数据库服务。 调用数据库启动命令，自动以主库运行。 通过VIP添加命令可以使主库通过VIP继续对外提供服务。 | 在原同步备库上执行数据库主备角色检查命令，检查结果应是主库。 在原同步备库上执行查看网络接口命令，发现vip绑定在原同步备库节点上。 |
| 2，3 | 人工 | DBA | 线下恢复硬件和OS。 | |
| 4 | 人工 | DBA | 删除原同步备上DCS的数据。 配置三台机器上的DCS和故障节点的HAS，参考部署文档。 通过DCS启动命令启动所有节点的DCS。 调用DCS集群状态查看命令检查DCS状态。 通过HAS启动命令启动主库（原同步备）。 | 在原异步备库上执行数据库主备角色检查命令，检查结果应是主库。 调用HAS状态查看命令，并且leader为原同步备库。 分别在三个节点上执行查看网络接口命令，发现vip绑定在原同步备库节点上。 |
| 5 | 人工 | DBA | 通过HAS启动命令启动同步备（原主库）。 | 通过vsql连接数据库。 执行数据库流复制状态检查命令，可以看到原主库的sync_state为Sync。 调用HAS状态查看命令，查看集群状态，此时集群状态应为一主一同步备，并且leader为原同步备库。 |
| 6 | 人工 | DBA | 通过HAS启动命令启动异步备。 | 通过vsql连接数据库。 执行数据库流复制状态检查命令，可以看到主库的sync_state为Sync，原异步备库的sync_state为Async。 调用HAS状态查看命令，查看集群状态，此时集群状态应为一主一同步备一异步备，并且leader为原同步备库。 |
