2020:下一个十年,存储发展的趋势是什么?(上篇)

  • 时间:
  • 浏览:1

浪潮资深存储架构师 叶毓睿  简而言之,存储怎么还可以 以更高效、更低成本的法律妙招,围绕着数据的产生、存放、保护、优化、利用,直至数据成为资产,满足数据对存储提出的要求。  相关的关键词有还还有一个:分布式存储、

浪潮资深存储架构师 叶毓睿

  简而言之,存储怎么还可以 以更高效、更低成本的法律妙招,围绕着数据的产生、存放、保护、优化、利用,直至数据成为资产,满足数据对存储提出的要求。

  相关的关键词有还还有一个:分布式存储、云存储、容器存储、全闪存、AI存储、区块链存储、边缘存储、量子存储、生物存储或基因存储等等。

  鉴蹉跎岁月

  大伙先回顾一下历史,过去十年(2010-2019)存储居于了有哪些事件?

  2010年:EMC收购Isilon,22.5亿美元 ;

  2010年:惠普收购3Par,23.5亿美元 ;

  2011年:戴尔收购Compellent,9.6亿美元 ;

  2011年:希捷收购三星硬盘,13.75亿美元 ;

  2011年:西部数据收购日立GST,48亿美元 ;

  2012年:VMware提出SDDC(软件定义数据中心)和SDS(软件定义存储)的概念,前一天推出SDS产品 – Virtual SAN的预览版 ;

  2013年:Avago收购LSI,66亿美元 ;

  2014年:闪迪收购Fusion-io,11亿美元 ;

  2015年:戴尔收购EMC,6500亿美元 ;

  2015年:西部数据收购闪迪,1500亿美元 ;

  2016年:IBM收购对象存储,约13亿美元 ;

  2016年:HCI(超融合)概念提出者Nutanix上市;

  2016年:博通收购博科,59亿美元 ;

  2016年:OpenText收购Dell EMC企业内容部门(包括Documentum等),16.2亿美元 ;

  2017年:HPE收购Nimble Storage,10.9亿美元 ;

  2018年:微软收购混合云数据存储公司Avere Systems ;

  2019年: AWS收购E8 Storage,估计在50000万美元至50000万美元之间 ;

  2019年: 谷歌收购存储企业Elastifile, 2亿美元 ;

  2019年: IBM收购 RedHat, 340亿美元,RedHat有两款开源存储产品:Ceph和Gluster。

  站在企业存储系统的淬硬层 ,有几件事值得注意:HCI、SDDC、SDS的相聚经常出先、戴尔收购EMC、西部数据收购闪迪、HPE收购3Par和Nimble Storage,以及云计算厂商微软、AWS和谷歌的收购。有有哪些事件体现了全球存储发展的几大趋势:分布式、云化、闪存化、智能等。

  1、分布式存储

  软件定义存储,为云而生。软件定义存储或者我将硬件的可操控成分按需求,分阶段的,通过编程接口将会以服务的法律妙招逐步暴露给前端应用,分阶段地满足应用对资源的不同程度、不同方面的灵活调用。软件定义存储其实是还还有一个 过程,还还可以 一蹴而就的目标,它分成不同阶段:抽象、池化和自动化。目前,软件定义存储最显著的形态学 是呈现分布式,根据近年来IDC的报告,软件定义存储按照访问法律妙招,分为三类:分布式块存储、分布式文件存储、分布式对象存储。未来十年,分布式存储的相对市场份额将不断增长,预计将超过集中存储的市场份额,然而两者将长期并存。

  戴尔收购的Compellent、HP收购的3Par,实现了块级虚拟化,将硬盘和RAID解耦;VMware Virtual SAN(现命名为vSAN)、Nutanix有别于以往的专用存储,将文件系统软件与服务器解耦,体现了分布式存储征程中的不同阶段

  回顾一下Gartner 在2015年7月发布的技术成熟 期是什么图片 期度曲线,彼时居于曲线的最高点,也即阶段二(欠缺期望的峰值,Peak of Inflated Expectations)。四、五年左右的时间,才被市场广泛认可,但迄今离居于市场主流份额还需一段时间。庆贺是,分布式存储发展非常迅猛,远超平均值。

  2、云化 (含容器、超融合、混合云)

  据报道,全球云存储市场2017年为5007亿美元,预计到2022年889.1亿美元,CAGR为23.7%;中国云存储市场2017年规模为88.68亿人民币,同比增长71.8%,2018年同比增长率将上升至72.8%,市场规模为158.5亿元人民币。

  Gartner在2019年的报告中显示:到2024年,40%的企业将实施共要一种生活混合云存储法律妙招,高于2019年的10% 。

  上述提到的云存储主或者我以AWS S3、EBS、阿里云块存储、OSS为代表的公有云存储。在本篇文章里,云化的概念更广泛,包括了公有云和私有云。

  云的特点包括弹性灵活、按需交付、按用付费等,除了众所周知的公有云之外,还还可以 就看私有云。AWS CEO Andy Jessy在AWS 2019 re:Invent大会上分享了如下消息:公有云的总支出只占到总IT支出的3% 。也或者我说,全球IT支出总,私有云仍占绝大多数。我曾在2017年就看一篇文章提到:预计到2040年,公有云共要占整个IT开支的1/3和1/2之间。将会其实 这样,也或者我说即使二十年后,私有云仍占半壁江山。

  1)私有云的云化对接

  存储怎么还可以 更好的服务私有云,成为企业级存储的还还有一个 重要课题。除了存储自身的池化、自动化之外,向上提供API,方便私有云管理平台按需驱动存储资源的创建、调整、优化甚至回收,将逐渐成为必备配置。云化对接涵盖两大块,一是对接开源的云管理平台,类事OpenStack的块接口Cinder、文件接口Manila、对象接口Swift和几乎成为标准的AWS S3接口;二是对接商业的云管理平台,首当其冲的是不能被主流Hypervisor识别,如VMware ESXi、Microsoft Hyper-V。国内存储厂商中,浪潮的AS15000在云化对接中做得更齐全。

  容器对接不还还可以 视为云化对接的一要素,大伙就看这样来太久的用户,包括互联网、金融、电信等行业,之前 之前 结束部署容器技术。或者存储支持CSI(Container Storage Interface)接口也将逐渐成为企业级存储的必备配置。

  超融合还还可以 视为私有云的一种生活部署形态学 ,当计算资源池和存储资源池在初次采购以及后续扩容的过程中,计算和存储的比例比较适中,也即,不让经常出先一定量计算资源还还可以 搭配一定量存储空间;或者我会经常出先一定量计算资源还还可以 搭配很少的存储空间,此时超融合是不错的选用。

  2)公私相互渗透

  在云计算领域,之前 之前 结束经常出先To C和To B的融合。

  早期公有云的用户主或者我什么都有有C端,将会小B的用户,随着云计算的深入和普及,云巨头之前 之前 结束希望吸引大B用户。或者,出于隐私保护、安全性、政府合规、管理、兼容性、惯性、迁移成本等多种因素的考虑,原有大B用户迁移到公有云的进展比预期要缓慢。

  或者,云巨头早在几年前就之前 之前 结束通过构建混合云将会私有云的法律妙招来瓜分B端IT市场的大蛋糕。AWS收购E8和推出Outposts,微软收购混合云数据存储公司Avere,阿里云推出混合云存储方案,腾讯云、金山云、京东云或者我甘人后。

  另外,将会成本、空间、能耗等因素,逐渐有更多用户希望To B的存储厂商,不能支持将历史数据备份或归档到公有云存储上。

  3、闪存化

  根据IDC 在2019年12月31日的报道:“2019前还还有一个 季度,中国企业级全闪存存储阵列市场同比增长超过500%。IDC预测, 2019年全闪存存储市场仍将达到近500%的增长”。

  据报道,闪存颗粒价格逐年下降(按照500%~40%的降幅),如下图所示。

  国内的长江存储或将加速闪存颗粒下降趋势;

  当全闪存相比机械盘价格差距不大时,更多用户想要为延时缩短而买单(目前和15k转,10k转的机械盘价格相差这样来太久;7.2k转的机械盘当下价格还有什么都有有优势);

  机械硬盘逐渐退化成类事磁带地位的介质。

  或者在当前的大背景下,将会机械硬盘的核心技术欠缺的由于 ,大力发展和推进闪存落地具有重要的意义。国内大的存储厂商中,华为和浪潮都推出了自己的NVMe闪存盘。

  闪存化的过程中,必然催生全闪存阵列的发展,其中的相关技术NVMe Over Fabric(简称NVMe-oF)借助RDMA等超低延时的传输协议,可远程访问SSD,正确处理了下一代数据中心在横向扩展 (Scale-out) 时所遭遇的性能、功能、容量三者之间难以选用的权衡问提。

  4、智能

  这里包括还还有一个 方面,一是存储的智能化;二是存储怎么还可以 为智能应用进行优化,也即AI存储应该怎么还可以 优化。

  1)存储智能化

  存储智能化所希望达到的或者我不能根据业务负载、运维管理等的历史记录,预测未来将会会居于有哪些,再据此动态地调整存储资源池,做到物尽其用;以及提供预警信息和执行动作,做到防患于未然。然而这俩 道路非常漫长,将会厂商还还可以 在安全性稳定性和性价比(也即动态调整存储资源)之间做选用;另外要想取得根据负载自动调整存储,其实不亚于将AI算法植入存储系统之中,难度不小。目前,存储厂商中,做得比较好的有HPE的Infosight和浪潮的InView。

  2)AI存储

  Gartner报告显示,到2022年,企业高管中将有半数以上会规划AI技术的部署,而这俩 数字在2018年的前一天仅有4% 。

  根据IDC数据,2018年上两天 ,中国AI基础架构市场销售额和出货量分别同比增长176%和129% 。

  AI所需存储,还还可以 分为准备、训练、推理和归档等阶段,每个阶段的IO形态学 不一样,对于存储的要求或者我一样。类事,在推理阶段,IO的形态学 是读写混合,或者要求存储的延时低,能快速响应。

  #FormatImgID_4#

  国内的AI公司针对不同行业不同细分场景,通过AI训练导出的模型,销售给最终用户。为了增加营收,降低部署难度,有不少AI公司将模型以及所需的软硬件打包,以一体机的法律妙招销售。其中的存储系统多采用OEM将会转售的法律妙招,将会AI公司的主业是它的算法以及针对场景不断优化,自研存储纳入到一体机里,性价比不高。

  总结而言,过去的有有哪些年,正确处理了数据的存放、保护和优化,尤其是在数字宇宙迅猛膨胀的过程中,怎么还可以 低成本、高数率地存放。

  Peter Ye(叶毓睿),浪潮资深存储架构师。区块链存储概念首倡者之一 。国内第一本SDS书籍 ---《软件定义存储:原理,实践和阳态》的作者,该书由倪光南院士亲自撰写序言,重印多次。《VMware软件定义存储:原理剖析和设计指南》的译者。曾任职于EMC、DELL、VMware等公司的系统顾问、存储架构师,对存储、云计算、区块链等IT行业的历史发展和未来趋势有着深入的了解。共同也是"乐生活与爱IT" 微信公众号的作者。

(本内容属于网络转载,文中涉及图片等内容如有侵权,请联系编辑删除)