如何优雅地恢复运行中的容器应用

一曲冷凌霜 提交于 2020-10-06 09:25:29

本文来自Rancher Labs

作者简介

鞠宏超,Rancher研发工程师。4年云计算领域经验,2018年加入Rancher Labs,先后参与了Longhorn产品研发,Rancher2.x产品研发,目前主要致力于Rancher企业版产品的设计与研发工作。

Longhorn是基于Kubernetes的轻量级分布式块存储系统,它完全开源,并且已经捐献给CNCF。随着云原生应用的普及,越来越多的服务提供容器运行时,数据的持久化存储问题渐渐显现出来,我们要做的不仅仅是数据的持久化,还要考虑备份的准确性,迁移的复杂性等。

Longhorn提供的分布式块存储可以在Kubernetes中直接使用持久化存储,它可以为数据卷在不同主机提供多副本服务,以保证数据的可靠性,它提供简洁的UI可以直接管理存储节点、数据卷,轻松实现数据卷的备份/定时备份,您还可以使用容灾备份功能,在不同集群创建容灾备份卷,并在发生紧急情况时及时进行故障转移。

在这篇文章中,我们将把MySQL作为Pod部署到集群A中,并使用Longhorn作为持久化存储卷,然后依托Rancher多集群管理的特性,结合Longhorn的容灾备份功能,演示一下如何优雅地将集群A中的MySQL应用及数据迁移到集群B中。

环境准备

  • Rancher (HA部署) - v2.4.8

  • Longhorn(通过Rancher UI Catalog部署) - v1.0.2

  • MySQL - 8

  • 私有S3 - minio部署

  • 业务集群A、B

部署longhorn

在Rancher中,进入集群A的system项目,在应用商店中可以一键启动Longhorn。

等待应用商店部署成功后,可以根据应用商店链接进入到Longhorn UI。

接下来,我们在集群B中以同样方式启动Longhorn,等待Longhorn正常运行。

创建s3访问的secret(用于longhorn备份使用)

访问Rancher,进入集群A的system项目,选择 资源 > 密文 菜单,在longhorn-system 命名空间中创建访问s3的secret,需要增加的参数包括:

访问Rancher,进入集群B的system项目,选择 资源 > 密文 菜单,在longhorn-system 命名空间中创建与上面相同的secret内容。

配置longhorn backup target

接下来我们需要在A和B两个集群的Longhorn中配置相同的backup target。

从应用商店的链接跳转到longhorn UI,点击 Setting > General 菜单,找到Backup分类,配置备份目标。

目前Longhorn支持NFS/S3两种备份方式,在本例中,我们使用minio搭建了一个私有S3服务,这里我们使用s3方式配置。

PS: 如果使用NFS,则需要保证NFS server支持NFSv4

部署MySQL应用

在集群A中部署一个MySQL应用,并在MySQL中创建测试表article并插入一条数据。

在集群A的Longhorn中对这个卷进行备份。

备份成功后,可以在集群B的Longhorn中看到备份信息(因为两个集群的Longhorn配置了相同的backup target,所以备份信息是共享的)。

创建容灾备份卷

访问集群B的Longhorn UI,使用集群A的Volume的备份,在集群B中创建一个容灾备份卷。

这里Volume的名称会根据备份卷自动填充,不建议手动修改

保存后,访问 Volume 页面可以看到我们新创建的容灾备份卷。

在集群A的MySQL应用中再次插入几条数据。

访问集群A的Longhorn UI,对这个卷再次进行备份。这时可以看到集群B中的容灾备份卷图标变成了灰色,代表这个卷正在同步集群A中Volume的最新备份数据,此时无法激活和使用容灾备份卷。

等待一会,图标变成了蓝色,代表已经与集群A中Volume的最新备份同步成功。接下来我们就可以使用这个卷了。

如果在集群A中对MySQL卷设置了自动备份,集群B中的Longhorn会定时轮询最新的备份,将增量数据信息自动同步到容灾备份卷,以保持与集群A中Volume的数据一致。

在新集群中恢复mysql应用

假设此时我们的集群A已经无法使用了,我们可以在集群B使用最新的备份卷快速恢复MySQL应用。

首先,我们将集群B的容灾备份卷激活。

等待卷状态变成Detached以后,选择创建PV/PVC。

这里不建议修改PV和PVC的名称,namespace可根据实际集群B中的namespace名称进行填写。保存会,会在集群B的指定namespace中创建PVC。

访问Rancher可以看到PVC已经创建成功。

使用恢复的PVC创建MySQL应用,再查询一下数据,可以看到数据也恢复过来啦!大功告成!

总 结

随着云原生应用的普及,越来越多的服务可以依托Kubernetes运行,保证服务的稳定性和可靠性也渐渐成为难题,依托Longhorn的跨集群容灾备份功能,在Rancher中可以自动完成应用的编排、数据迁移,随时优雅的切换业务应用运行环境。

标签
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!