数字化转型之基础设施篇 | QingStor®️云时代企业级分布式存储平台

拟墨画扇 提交于 2020-02-12 00:29:49

据 IDC 最新报告预测,2022 年中国 50% 以上的组织都将成为数字化坚定者,依靠新的商业模式、数字化产品与服务实现业务增长。

面对数字化转型的时代浪潮,青小云为大家准备了一份硬核大礼 —— 《数字化转型之路》,包含基础设施业务架构解决方案行业实践未来探索五个部分,该系列是对数字化转型理论与具体实践路径的系统梳理,希望帮助读者全面准确把握数字化转型发展趋势与前沿技术,促进企业与组织能够在变革的数字化世界中创造更大的价值,实现更强健的生命力。

今天与大家分享的是《数字化转型之路》中基础设施篇——QingStor®️ 云时代企业级分布式存储平台。

以下是 分享正文

首先为大家简单介绍青云在存储上的思考和产品线的布局,让大家对青云的存储、特别是软件定义存储有一个全面的了解。

市场发展趋势

img

这是 IDC 2018 年的报告,可以看出 2018 年软件定义存储领域的增长比较快,同比增长率超过 50%,往前追溯一年,2017 年同比 2016 年是超过百分百的增长率。

在 SDS 市场中,按存储接口领域区分,主要分为分布式块存储、分布式文件存储和分布式对象存储。在这三种接口里占比最大的是分布式文件存储,2018 年大概有六成市场属于分布式文件存储,块存储大概是两成左右,对象存储也是两成左右。

这是三种存储分别在 2018 年的增长态势,以及权威市场关于未来几年的增长率预测。在接下来的三到五年可以看出分布式文件存储未来还会是 SDS 市场中最大的一块,会有超过一半的占比。

另外值得提的一点是,分布式对象存储会是接下来几年增长率最快的一个,接近 160% 的增长,接下来一年会是高增长的一年。

块存储在这三种存储接口里相对比较稳定一点,因为块存储本身承载的业务主要以虚拟化或者传统数据库业务为主,这一块业务本身相对稳定。另一部分是块存储,分布式块存储的增量很大一部分,预计未来会来自于传统 SAN 阵列,像集中式传统 SAN 阵列向分布式块存储转变的市场增量。这是整个市场的情况,在国内市场情况来看,这一块市场发展接下来几年预计会保持快速增长,这也是青云聚焦于软件定义存储市场的动力所在。

QingStor®️ 软件定义存储产品线及架构

青云软件定义存储的产品线发布了四款产品。QingStor®️ 融合存储,QingStor®️ 对象存储、QingStor®️ NeonSAN®️(块存储)以及 QingStor®️ 文件存储。

这四种存储分别对应不同的场景,块存储主要应用于虚拟化、容器平台及传统 OLTP/OLAP 数据库应用。文件存储是大家熟知的 NAS,只不过这里是分布式架构,提供标准 NFS 的接口给企业内传统应用,以及 HPC、高性能计算等比较有特色的行业应用。对象存储诞生比较晚,常在互联网内部做海量数据承载的平台,在最近这几年逐渐被大家所熟悉。但随着对象存储未来生态的发展,大家对对象存储的接触会越来越多。

重点说一下融合存储,简单来说融合存储是一套存储架构或者一套软件栈能够提供三种存储、三种形态的接口,涵盖三种存储各自具备的企业特性都归纳到一套软件栈里,这是最表面的意思。

谈具体产品之前,我们想跟大家分享青云做存储的思考或者本身的定位。

青云软件定义存储技术是随着公司处理之初已经开始了,2012 年青云开始做公有云,大家知道公有云必不可少的服务是硬盘服务,这一块在青云内部当时是以软件定义存储实现的。2012 年到 2016 年期间,青云软件定义存储的技术主要还是在公有云上,2016 年我们第一次将公有云上的软件定义存储技术移植到私有云上,推出我们的对象存储。

相比很多大厂,在软件定义存储领域七年的积累也不短,像 VMWare vSAN 是在 2014 年出第一个正式版本。在软件定义存储这个领域,青云的技术积累不输于任何一个国内或者国际厂商。我们所有的软件栈是完全自主开发的,公有云、私有云完全是一套架构,保证架构的稳定性。

值得一提的是青云是云厂商出身,我们本身做存储,我们存储和云平台的结合,和云计算中各种模块的结合,我们是有自己的理解的。所以我们的存储产品可以更好地帮助企业往数字化转型、云计算做转型,这也是我们的优势所在。

青云的软件定义存储技术从最初的公有云慢慢到私有云,在不同行业到现在为止有超过 9 万家客户的验证。存储归根到底要保证数据的安全,在数据可靠性上给大家完全的放心。

接下来我们具体来看产品功能方面,解决了客户哪些核心需求点。

可靠性和性能

对于存储来说,数据安全是第一位的,其次关心的是性能,可靠性和性能是存储基本功能,必须要满足客户的需求。

适配场景

存储作为数据的载体,深入的跑着各种形态的业务,如何让存储对接各种业务,这时候就需要存储具备比较好的生态。青云做生态这一块下了很大的力气,我们不仅可以支持青云自己的 QingCloud 云平台,还可以支持包括 VMWare、OpenStack、KubeSphere 在内的平台,我们都做了官方认证,可以很好的做对接。

企业级特性

在对业务丰富支持上,丰富的企业级特性也是很关键的一点,这也是我们这几年致力于不断提高的方面,现在可以给客户提供很丰富的高级特性的选择。

运维管理

企业选购存储时还会有基于性价比或者成本分析的考虑,青云的存储可以提供极简、智能的运维,可以很好的降低客户的运维成本。

标准硬件

青云的存储产品是基于标准 X86 硬件的,在采购成本上相比专有硬件存储可以给客户很好的降低采购成本。

接下来具体看看青云产品线的四个产品:

一是 NeonSAN®️,可以说是企业云时代所有企业的核心存储平台。它承载的业务是企业数据中心内部的核心数据库,有传统的 Oracle 数据库、SQLServer 数据库、DB2 数据库等,还有主流虚拟化平台与容器平台。物理主机很多时候需要存储时要采用块存储。

二是文件存储,包括两方面:企业内部最普通的、大家见得最多的是内部文档共享需求,OA 系统、邮件系统,具有行业特色的应用。这些行业特色对文件存储需求各不一样,有些对性能要求特别高,但是它对并发的要求不高。有些对并发的性能要求特别高,这要看各个行业的特别需求。

三是对象存储,青云的对象存储目前在私有云领域主要应用在视频监控、流媒体处理、网络电子影像和票据平台。另外还有企业内部如销售访问 App、企业网盘等。

四是融合存储,一套存储可以提供三种不同类型的接口,在场景上可以覆盖前面三种不同存储的场景的集合。另外,企业采购存储时需要根据业务采购存储,每个业务需求的存储类型不一样,可能同时采用一套块存储、一套文件存储和一套对象存储,每个存储之间是独立的,这时候做数据的管理或者数据的流通都会碰到一定困难,融合存储可以很好地解决这一点。

这是青云融合存储的架构。青云做融合存储并不是随波逐流,我们并不是因为这几年大家听到很多 Ceph 的声音,Ceph 一出来就做融合,我们的理念和 Ceph 完全不一样,为什么这么说?

青云推融合存储并不是为了做而做,我们做融合存储前面的基础是我们分别有了专业的块存储、专业的文件存储和专业的对象存储,我们三种存储在架构上可以很方便地做整合,我们拥有三种存储不同存储接口的专业技术,有了这种技术的积淀,我们顺理成章地基于原有的技术架构做一套架构上先进的,设计理念非常先进的一套融合存储的架构。这是我们做融合存储的出发点,这也是我们和大家听到 Ceph 最不同的一点。

在功能上,我们融合存储一套架构同时提供块、文件、对象,我们的架构是分层的。最底层是分布式块存储,也就是对应 QingStor®️ NeonSAN®️ 块存储技术。中间层是文件系统,也是我们 QingStor®️ 文件存储采用的核心文件系统。最上层是对象存储,采用的是现在公有云和私有云用到的对象存储核心的索引架构。

这套架构最先进的一点,或者和友商比最值得提的一点是:三种存储类型,每一种存储形态能提供的性能都是和它存储本身的定位相匹配的。

块存储是企业内部承载核心数据库的,对时延、IOPS 要求非常高。大家可以看软件栈里,块存储软件栈只经过最下面的这一层,它的软件栈是最短的,它的 IO 路径是最短的。这一点保证了在融合存储架构中块存储 IO 路径最短,性能最好。中间是文件存储,文件存储基于块存储其 IO 路径是中间的,这符合 NAS 存储的应用对单笔 IO 性能要求处于 10 秒到几十毫秒的量级,块存储一般要求几个毫秒的量级。最上层是对象存储,对象存储经历了三层架构,它的 IO 路径是最长的,但没有问题。对象存储本身就是这样的需求。

平时大家说对象存储是海量数据、海量并发。当你针对单个 IO 去讲,对象存储单个 IO 的时延容忍度是最高的,它可以到几十毫秒到近百毫秒的级别,它承载的应用对时延的要求是这样的级别。三层架构对它完全没有任何影响,该快的地方让它快,该适中的地方适中,对时延要求不高的地方,IO 路径长一点没有任何关系,这是青云整个融合存储架构的精髓所在。

整个融合存储中,单拿出其中任何一个形态的接口来看,我们的性能不输于独立的三种形态的存储。

融合存储很重要的一点是要做统一管理、统一运维。作为这一点,我们青云不管从设计、前端还是交互逻辑上做了很大的努力,我们基于最新的设计语言做了全新的统一存储,不管是统一存储、融合存储还是三个不同的独立部署的存储,做了一套统一交互管理平台。界面可视化、易用程度应该属于国内比较好的水平。

接下来我想跟大家分享我们做存储七年来取得的一点小成绩。

2018 年 QingStor®️ 产品线业绩取得 200% 的增长,我们遍布十几个行业,在私有云的部署,在公有云上使用软件定义存储服务的企业更多,这里列出我们私有云行业中部署的客户。正是因为我们 2018 年比较好的表现,所以 2018 年 Q4 在权威 IDC 市场统计报告中,我们 QingStor®️ NeonSAN®️ 块存储、QingStor®️ 对象存储挤身国内做软件定义存储的核心厂商,都是排在 2018 年 Q4 市场统计的第六位。

这几点是 IDC 对青云的评价,这三点和我刚才谈到青云自身做存储定位是很好的契合匹配点。我们青云完全自研软件定义存储技术,自主掌握核心科技,我们做存储先做独立的、专业的块、文件、对象,在此基础上做融合存储。打造一条比较好的基于存储的生态平台。

总结来说,青云是专业做存储的厂商,虽然我们整家公司是做云计算的,但在存储领域我们的专业性不亚于国内或者国际上的任何厂商。另外,我们对云计算有更深的了解,我们的存储在帮助客户做云计算转型方面,可以给客户更好的助力。最后,大家用存储都比较谨慎,在这里告诉大家,我们青云的存储产品在私有云很多客户那里有好几年部署的生产案例,对青云存储的稳定性、可靠性和性能可以完全放心。

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!