继网络接入存储、块存储、文件存储之后,对象存储掀起了新一轮的发展浪潮。如今,传统企业存储比如NAS或者SAN等显然无法应对如此海量的非结构化数据存储需求。国外IBM、Red Hat、HDS、EMC等巨头、国内华为云、青云、杉岩数据等企业纷纷在企业级对象存储领域展开了积*布局。
“
继网络接入存储、块存储、文件存储之后,对象存储掀起了新一轮的发展浪潮。如今,传统企业存储比如NAS或者SAN等显然无法应对如此海量的非结构化数据存储需求。国外IBM、Red Hat、HDS、EMC等巨头、国内华为云、青云、杉岩数据等企业纷纷在企业级对象存储领域展开了积*布局。
”
请点击此处输入图片描述
十多年前IT业界预计,全球数据级别将增长至超过PB级别。放眼当前,云计算正在开启爆发式创新的时代,物联网的出现让数以百万计的设备每时每刻都在创建、收集和发送数据,数据量级也从PB跃升到了ZB级别。
根据IDC预测,到2020年,总体企业数据将达到44ZB,其中80%的数据是非结构化数据(图片、视频、归档以及企业级备份等各种数据)。面对****的海量数据来势汹汹,企业必须确定如何才能有效保留、保护、分析自己的非结构化数据,并**程度地发挥这些数据的价值。
请点击此处输入图片描述
海量非结构化数据来势汹汹
成功“激活”对象存储
当下,企业级存储分为两大类:**类是传统企业存储。其中,NAS(网络接入存储)和SAN(存储区域网络)是传统企业存储中**重要的两类。
NAS被定义为一种特殊的专用数据存储服务器,包括存储器件和内嵌系统软件,可提供跨平台文件共享功能。SAN被定义为互连存储设备和服务器的专用光纤通道网络,它在这些设备之间提供端到端的通讯,并允许多台服务器独立访问同一个存储设备。
请点击此处输入图片描述
传统企业存储都有一个共同的特征,即只能垂直扩展,它在管理、成本、容量和性能方面满足不了海量非结构化数据的存储需求。为了满足非结构化数据的存储需求,整个企业级存储市场慢慢从“垂直扩展”向“水平扩展”转变,形成了新一代企业级存储,包括块存储、文件存储和对象存储。
在水平扩展存储中,用户会面对块存储、文件存储和对象存储等类别,它们各自适用的场景不同。其中分布式块存储适用的场景相对来说比较特定,比如Oracle数据库,需要挂高性能硬盘做数据库的存储。
此外,*适合存储非结构化数据,即图片、视频等类型数据的是分布式文件存储和对象存储。IDC研究显示,到2021年,文件存储和对象存储的数据容量总和高达400EB左右,其中对象存储将达到350EB,占据总数的75%。
作为一种新型网络存储架构,对象存储(Object-based Storage,简称OSD)采用了“对象”数据组织,克服了 NAS与 SAN 的不足,使它既有“块”接口的快速,又有“文件”接口的便于共享,提供具有高性能、高可靠性、跨平台以及安全的数据共享的存储体系结构。
对象存储技术将文件数据和存储元数据管理进行分离,突破了SAN 的文件共享限制和NAS系统中常见的数据路径瓶颈。对象由数据、属性及操作组成,在安全性、跨平台数据共享、高性能、可扩展等方面更胜一筹。
请点击此处输入图片描述
总的来看,对象存储主要有四个优势:
1、容量无限扩展。OBS所有业务、存储节点采用分布式集群的方式进行工作,各功能节点、集群都可以独立扩容,整个扩容过程对用户**透明。用户只需尽情地享用云存储带来的无限空间,不必预测未来的存储需求并可以按需要向上和向下扩展,从而大幅度提高业务的灵活性。
2、数据可靠性更高。通过提供对象数据多份冗余和**多份对象数据一致性自动修复技术来提供对象数据的高可靠性。OBS系统设计的数据持久性高达99.9999%,假如对象存储中有1000亿个用户文件,每月*多只有1个文件可能发生数据丢失。
3、用户数据更安全。用户数据传输到OBS时支持SSL加密,同时,OBS通过AK/SK对访问用户的身份进行鉴权,确保数据传输与访问的安全。此外,用户上传的数据在对象存储服务中分片存储在不同的硬盘上,即便磁盘数据被盗走,也无法将其还原成对象数据。
4、维护成本更低。由于数据存储在OBS中,企业无需招聘专门的存储设备维护人员,设备的维护交由OBS处理即可。
对象存储成标配
云计算厂商如何玩转对象存储?
在对象存储市场,云计算厂商、存储厂商、IT厂商、软件厂商均有所布局,比如IBM、HDS、EMC、Nutanix、VMware都推出了各自的产品,公有云提供商是绝对的主力玩家。
对象存储的发展和商业化一直与云计算行业紧密相连,云计算市场发展至今已趋于成熟,而应用比较广的对象存储服务,现成为云服务公司的一项基础业务,市面上能够提供这项服务的厂商数不胜数。
作为历史上*早期的云存储服务,SimpleStorage Service(简称S3)的目的和功用就是为AWS未来的云服务用户提供*基础、*简便的云存储服务,无论是图片、视频还是文本,S3都能够提供存储服务,简单、集中、性价比高。
微软Azure推出了高度可缩放的非结构化数据对象存储——Blob存储,凭借百亿亿字节容量和巨大的伸缩性,其可根据数据访问频率,将数百至数十亿的对象存储在“热”、“冷”或“存档”层中,企业可以轻松高效地存储**类型的非结构化数据。
国内云厂商也积*布局对象存储,比如阿里云对象存储(ObjectStorage Service,简称OSS)已实现商业化服务5年以上,其是基于阿里云飞天分布式系统的海量、安全和高可靠的云存储服务。UCloud则提供了对象存储UFile服务,UFile具有存储无上限、支持高并发访问、成本更低等优势;
解决业务架构的文件存储问题,有效降低海量文件的存储成本,支持热点数据的高并发访问,提升终端用户访问体验。企业级云服务商青云QingCloud也提供了基于公有云的QingStor对象存储服务,还有QingStor对象存储私有云一体化解决方案。
对象存储在公有云的成功,已经对企业存储生态和部署模式产生了影响。比如现在OpenStack Swift和Ceph这些开源对象存储的流行,Amazon S3成为事实上的对象存储访问标准,都是公有云对象存储普遍部署的影响。
作为被正被众多厂商广泛采纳的存储方式,对象存储如何才能帮助云计算厂商攻城略地?从协议层看,对象存储需要兼容AWS S3 API,支持多种协议,包括NFS、FTP、HDFS等。只有这样才能满足客户的应用需求,毕竟对企业级应用来说,接口和协议的丰富度是必不可少的。
在交付模式上,对象存储可以通过公有云、私有云、混合云等模式进行交付,并实现统一管理。虽然对象存储*初是由公有云厂商推出的,但对某些行业而言,他们更倾向于在自己的数据中心里构建一个数据池,进行统一管理,以及后续的分析和利用。
所以,交付方式的多样化是必不可少的,而且对于对象存储厂商来讲,需要具备多种交付模式上的统一管理能力。现在企业级存储市场呈现融合趋势,比如开源存储软件Ceph,将块存储、文件存储以及对象存储以同一套架构输出。
此外,对象存储和大数据平台的集成或者接驳**重要。在公有云形态上,大数据和对象存储的关系**紧密,大数据是对象存储所存储数据的主要来源。但在私有云上还是缺失的状态,对象存储应该在私有云上加深与大数据的集成关系。
再次,对象存储与数据相关的SaaS服务。比如用户希望分析对象存储本身的使用情况,指导整个IT设施的规划和构建,这就属于与数据相关的SaaS服务。*后,企业级存储软件生态与合作,企业级存储生态里不只是块存储、文件存储、对象存储,还有很多其它的,比如DR、灾备、传统的备份软件等。
请点击此处输入图片描述
在企业级市场里,对象存储已经过了市场教育阶段,其将占据企业级存储容量75%左右的份额。可以预见,对象存储技术将成为未来存储技术的重要组成部分,随着云计算市场的快速发展,对象存储将促进企业存储的加速转型。不过,虽然对象存储迎来了快速发展的“东风”,但如何顺应发展大势和满足客户需求,则依然是对象存储提供商赢得市场的关键。