存储市场发展趋势依旧美好,对象存储将成企业存储新标准丨科技云·视角
继网络接入存储、块存储、文件存储之后,对象存储掀起了新一轮的发展浪潮。如今,传统企业存储比如NAS或者SAN等显然无法应对如此海量的非结构化数据存储需求。国外IBM、Red Hat、HDS、EMC等巨头、国内华为云、青云、杉岩数据等企业纷纷在企业级对象存储领域展开了积极布局。
”十多年前IT业界预计,全球数据级别将增长至超过PB级别。放眼当前,云计算正在开启爆发式创新的时代,物联网的出现让数以百万计的设备每时每刻都在创建、收集和发送数据,数据量级也从PB跃升到了ZB级别。
根据IDC预测,到2020年,总体企业数据将达到44ZB,其中80%的数据是非结构化数据(图片、视频、归档以及企业级备份等各种数据)。面对前所未有的海量数据来势汹汹,企业必须确定如何才能有效保留、保护、分析自己的非结构化数据,并最大程度地发挥这些数据的价值。
海量非结构化数据来势汹汹
成功“激活”对象存储
当下,企业级存储分为两大类:第一类是传统企业存储。其中,NAS(网络接入存储)和SAN(存储区域网络)是传统企业存储中非常重要的两类。
NAS被定义为一种特殊的专用数据存储服务器,包括存储器件和内嵌系统软件,可提供跨平台文件共享功能。SAN被定义为互连存储设备和服务器的专用光纤通道网络,它在这些设备之间提供端到端的通讯,并允许多台服务器独立访问同一个存储设备。
传统企业存储都有一个共同的特征,即只能垂直扩展,它在管理、成本、容量和性能方面满足不了海量非结构化数据的存储需求。为了满足非结构化数据的存储需求,整个企业级存储市场慢慢从“垂直扩展”向“水平扩展”转变,形成了新一代企业级存储,包括块存储、文件存储和对象存储。
在水平扩展存储中,用户会面对块存储、文件存储和对象存储等类别,它们各自适用的场景不同。其中分布式块存储适用的场景相对来说比较特定,比如Oracle数据库,需要挂高性能硬盘做数据库的存储。
此外,最适合存储非结构化数据,即图片、视频等类型数据的是分布式文件存储和对象存储。IDC研究显示,到2021年,文件存储和对象存储的数据容量总和高达400EB左右,其中对象存储将达到350EB,占据总数的75%。
作为一种新型网络存储架构,对象存储(Object-based Storage,简称OSD)采用了“对象”数据组织,克服了 NAS与 SAN 的不足,使它既有“块”接口的快速,又有“文件”接口的便于共享,提供具有高性能、高可靠性、跨平台以及安全的数据共享的存储体系结构。
对象存储技术将文件数据和存储元数据管理进行分离,突破了SAN 的文件共享限制和NAS系统中常见的数据路径瓶颈。对象由数据、属性及操作组成,在安全性、跨平台数据共享、高性能、可扩展等方面更胜一筹。
总的来看,对象存储主要有四个优势:
1、容量无限扩展。OBS所有业务、存储节点采用分布式集群的方式进行工作,各功能节点、集群都可以独立扩容,整个扩容过程对用户完全透明。用户只需尽情地享用云存储带来的无限空间,不必预测未来的存储需求并可以按需要向上和向下扩展,从而大幅度提高业务的灵活性。
2、数据可靠性更高。通过提供对象数据多份冗余和保证多份对象数据一致性自动修复技术来提供对象数据的高可靠性。OBS系统设计的数据持久性高达99.9999%,假如对象存储中有1000亿个用户文件,每月最多只有1个文件可能发生数据丢失。
3、用户数据更安全。用户数据传输到OBS时支持SSL加密,同时,OBS通过AK/SK对访问用户的身份进行鉴权,确保数据传输与访问的安全。此外,用户上传的数据在对象存储服务中分片存储在不同的硬盘上,即便磁盘数据被盗走,也无法将其还原成对象数据。
4、维护成本更低。由于数据存储在OBS中,企业无需招聘专门的存储设备维护人员,设备的维护交由OBS处理即可。
云计算厂商如何玩转对象存储?
在对象存储市场,云计算厂商、存储厂商、IT厂商、软件厂商均有所布局,比如IBM、HDS、EMC、Nutanix、VMware都推出了各自的产品,公有云提供商是绝对的主力玩家。
对象存储的发展和商业化一直与云计算行业紧密相连,云计算市场发展至今已趋于成熟,而应用比较广的对象存储服务,现成为云服务公司的一项基础业务,市面上能够提供这项服务的厂商数不胜数。
作为历史上最早期的云存储服务,SimpleStorage Service(简称S3)的目的和功用就是为AWS未来的云服务用户提供最基础、最简便的云存储服务,无论是图片、视频还是文本,S3都能够提供存储服务,简单、集中、性价比高。
微软Azure推出了高度可缩放的非结构化数据对象存储——Blob存储,凭借百亿亿字节容量和巨大的伸缩性,其可根据数据访问频率,将数百至数十亿的对象存储在“热”、“冷”或“存档”层中,企业可以轻松高效地存储任何类型的非结构化数据。
国内云厂商也积极布局对象存储,比如阿里云对象存储(ObjectStorage Service,简称OSS)已实现商业化服务5年以上,其是基于阿里云飞天分布式系统的海量、安全和高可靠的云存储服务。UCloud则提供了对象存储UFile服务,UFile具有存储无上限、支持高并发访问、成本更低等优势;
解决业务架构的文件存储问题,有效降低海量文件的存储成本,支持热点数据的高并发访问,提升终端用户访问体验。企业级云服务商青云QingCloud也提供了基于公有云的QingStor对象存储服务,还有QingStor对象存储私有云一体化解决方案。
对象存储在公有云的成功,已经对企业存储生态和部署模式产生了影响。比如现在OpenStack Swift和Ceph这些开源对象存储的流行,Amazon S3成为事实上的对象存储访问标准,都是公有云对象存储普遍部署的影响。
作为被正被众多厂商广泛采纳的存储方式,对象存储如何才能帮助云计算厂商攻城略地?从协议层看,对象存储需要兼容AWS S3 API,支持多种协议,包括NFS、FTP、HDFS等。只有这样才能满足客户的应用需求,毕竟对企业级应用来说,接口和协议的丰富度是必不可少的。
在交付模式上,对象存储可以通过公有云、私有云、混合云等模式进行交付,并实现统一管理。虽然对象存储最初是由公有云厂商推出的,但对某些行业而言,他们更倾向于在自己的数据中心里构建一个数据池,进行统一管理,以及后续的分析和利用。
所以,交付方式的多样化是必不可少的,而且对于对象存储厂商来讲,需要具备多种交付模式上的统一管理能力。现在企业级存储市场呈现融合趋势,比如开源存储软件Ceph,将块存储、文件存储以及对象存储以同一套架构输出。
此外,对象存储和大数据平台的集成或者接驳非常重要。在公有云形态上,大数据和对象存储的关系非常紧密,大数据是对象存储所存储数据的主要来源。但在私有云上还是缺失的状态,对象存储应该在私有云上加深与大数据的集成关系。
再次,对象存储与数据相关的SaaS服务。比如用户希望分析对象存储本身的使用情况,指导整个IT设施的规划和构建,这就属于与数据相关的SaaS服务。最后,企业级存储软件生态与合作,企业级存储生态里不只是块存储、文件存储、对象存储,还有很多其它的,比如DR、灾备、传统的备份软件等。
在企业级市场里,对象存储已经过了市场教育阶段,其将占据企业级存储容量75%左右的份额。可以预见,对象存储技术将成为未来存储技术的重要组成部分,随着云计算市场的快速发展,对象存储将促进企业存储的加速转型。不过,虽然对象存储迎来了快速发展的“东风”,但如何顺应发展大势和满足客户需求,则依然是对象存储提供商赢得市场的关键。
相关阅读
【科技云报道原创】
转载请注明“科技云报道”并附本文链接