青云科技自研分布式存储全线升级 挖掘数字时代潜力

互联网
2020
09/30
15:33
分享
评论

QingStor是青云QingCloud(qingcloud.com)企业级分布式存储产品线品牌,包括NeonSAN、对象存储、文件存储和融合存储四款产品。通过八年的打磨,青云QingCloud近日全面升级了QingStor系列产品:QingStor NeonSAN升级至3.0,并一口气发布了全闪一体机和容器存储一体机新品;QingStor对象存储3.0版本进一步平衡容量和性能;QingStor文件存储升级到2.0版本,并持续提升性能。另外,还全新升级了管理平台Portal 3.0。

自主设计研发应对企业级存储市场变迁

作为企业数字化转型的基础,企业级存储一直是业界关注的焦点。过去10年,企业级存储市场发生了深刻变化,QingStor存储产品线研发负责人王煜认为,主要呈现两大发展趋势:

一是分布式存储正在经历快速增长时期。IDC 2019年市场预测报告显示,无论是对象存储、文件存储还是块存储,在未来几年里都会保持两位数高速增长。

“现如今,企业内部分布式存储部署的占比越来越重,甚至在一些企业里超过了传统存储。分析其背后的原因,主要来源于过去10年里,包括移动互联网、大数据、5G、AIoT等新兴技术应用场景对于存储提出新的需求。比如对高容量的需求,对更复杂场景(如云计算)的需求。分布式存储正因为场景的不同而产生巨大的增长。” 王煜表示。

二是全闪存储逐渐成为主流。IDC市场报告显示,全闪存储在所有采用存储的企业里,几乎已经占80%的使用率,且从现在往后,几乎每年都会保持50%的年均高增速。分析其背后的主要原因,在于SSD全闪介质的成本正在逐年快速下降,这是企业采用全闪存储最主要的驱动力。

基于当前存储市场发生的巨大变化,QingStor研发团队投入了巨大的研发精力,从2012年开始推出第一个版本的云计算产品开始,就在存储的底层坚持采用完全自研的方式,积累了大量的云计算环境的技术实践。到目前为止,QingStor产品家族里有四款专业存储产品,包括NeonSAN、对象存储、文件存储和融合存储,共同支撑着市面上几乎全部主流云计算产品。

“这四款产品每一款都是在架构设计时采用独立的设计方法,跟开源存储不同,几乎所有开源的存储或者基于开源存储的商业存储产品,都有通用的、统一的存储底层,而QingStor每一款存储产品都是独立进行架构设计和开发的。” 王煜表示。

为什么QingStor每一款存储产品都要独立架构设计和开发?王煜告诉记者,因为企业的存储场景越来越多样和复杂,不存在一种架构设计能够完全满足所有存储场景。有些场景需要极致性能,有些场景需要大容量,有些场景需要高IOPS,有些场景需要高吞吐,有些场景需要通用的接口。为了满足多场景应用,QingStor把存储场景大概分为热数据、冷数据、温数据以及混合场景,并有针对性地设计不同存储产品。

 QingStor NeonSAN为核心业务而生

提到SAN,大家首先想到的词是高端,也就是说上面可以跑核心业务,如数据库。在设计QingStor NeonSAN时,青云QingCloud希望打造一款拥有极致性能的分布式存储产品。因此,在技术设计时,采用缩短I/O路径栈、去掉本地文件系统、提高协议转换效率等方法,打造一款拥有极致性能的分布式SAN存储产品。正是因为这样的设计,QingStor NeonSAN能够稳定地支撑企业的核心业务,比如核心数据库Oracle RAC。到目前为止,市面上可以很稳定、快速地跑Oracle RAC的,几乎都是传统存储。在分布式存储里,QingStor NeonSAN应该是第一款,也是唯一一款能够很好支持Oracle RAC的存储产品。

从1.0版本到现在的3.0版本,QingStor NeonSAN 整个产品迭代都在围绕核心场景打造产品的能力。截至目前,持续赋能以下四个主要核心场景:云平台/虚拟化场景、大数据场景、业务连续性场景以及最近这两年非常火的容器/云原生的场景。作为一款可以独立售卖的分布式块存储,QingStor NeonSAN 除了可以与QingCloud云平台形成完美的对接、实现云平台层面的统一管理和性能的最大优化之外,还能很好地对接目前业界主流的虚拟化平台、云计算平台,如VMware平台、OpenStack平台、Hyper-V平台。

为了进一步优化企业用户落地容器平台的生产环境,青云QingCloud 推出了KubeSphere KF3000容器一体机。

“如果青云QingCloud只是把目前在国内第一款开源容器平台KubeSphere,以及分布式块存储QingStor NeonSAN的软件提供给企业,企业还需要做大量配置的工作,在落地生产上也要再做优化。这和容器平台要极大便捷运维者、开发者的理念是不一致的,所以青云QingCloud决定推出容器一体机KF3000。” QingStor存储产品线产品经理冯相东表示。

KF3000这款一体机不是功能模块的简单拼凑,而是通过大量的深层优化而具有整体性的产品,提供整体的商用级服务。另外,这款产品里的核心组件经过规模化的生产验证,提升了可靠性。

此外,青云QingCloud还推出了QingStor NF6000分布式全闪存储一体机:虽然基于标准的x86服务器以及其他看似平常的硬件配置,但性能确很高,通过最小规模的3节点集群,QingStor NF6000分布式全闪存储一体机可以给客户3节点100万IOPS的性能指标,并且保证时延在0.5毫秒以下。除了性能是最大的亮点外,作为一体机,QingStor NF6000分布式全闪存储一体机提供开箱即用的体验,插电后简单地配置就能应用。在运维层面,针对已选定的硬件,还支持硬盘点灯等功能,提高运维效率。

  QingStor对象存储 3.0提升性能应对海量数据

对象存储是分布式存储领域里一个新晋的派系,可以解决非结构化数据存储问题,如海量图片、音视频、日志、归档备份等。这些数据读取的频率并不是特别高,通常是一次写入、多次读取的模型。但是其数据容量、数据数量非常大。因此QingStor对象存储设计的核心是承载海量的数据。在整个架构设计时,青云QingCloud采用了完全Share-Nothing的架构,没有任何单点,每一个组件都是可以无限水平扩展,并且性能不会下降。

QingStor对象存储产品经理贾斌表示,本次升级的QingStor对象存储3.0 版本带来了两大新能力,第一是服务更多数据场景(譬如数据迁移、数据保护、数据备份、AI视频监控),第二是更强大、更具优势的存储性能,来应对用户更复杂多样的需求场景。

值得一提的是,本次发布的QingStor对象存储3.0版本,单bucket(存储桶)可以支撑100亿个对象的同时,性能却不会下降。

  QingStor文件存储2.0版本性能大幅提升

如果说存储技术是整个IT技术的皇冠,那么文件存储则是皇冠上的明珠。文件存储在技术架构的实现上是非常复杂和艰难的,目前在世界范围内能做好文件存储,尤其是能够做好一款分布式文件存储的厂商少之又少。

在过去几年时间里,QingStor研发团队一直在认真打磨文件存储。QingStor 文件存储研发负责人黄蒙告诉记者,QingStor文件存储旨在打造一款基于通用文件接口的多租户文件系统, 以帮助更广泛的应用在云计算基础架构下享受可扩展、高可用、高性能的文件存储服务。

据介绍,全新发布的QingStor文件存储2.0版本,是为通用场景设计的。QingStor文件存储的接口协议部分可以完整支持POSIX语义接口,从而帮助企业零成本无缝对接企业内部各种应用系统。

在性能方面,QingStor文件存储2.0版本通过两个手段达成了性能提升的目标,一个是局部服务架构的优化,另一个则是通过更先进的编程语言助力。除了性能的进一步提升外, QingStor文件存储2.0版本还带来了一些新的企业级特性。比如,基于quota容量的限制、数据压缩/加密功能等。需要强调的是,基于最初的架构设计原则,QingStor文件存储新增的每一个特性都允许用户根据业务实际需求,在单个租户文件系统上独立地选择是否开启(或调配)。另外,其监控告警服务也新增了更多维度,并且提供了配套的更出色的可视化体验。

“无论从产品定位还是架构设计原则,我们所做的所有努力,都是旨在打造一款在云计算基础架构下更加通用的文件存储产品,我们希望能通过这款产品帮助更多类型的应用更平滑上云,享受到更好的云计算基础设施带来的便利。”黄蒙表示。

THE END
广告、内容合作请点击这里 寻求合作
免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表砍柴网的观点和立场。

相关热点

相关推荐

1
3