在前不久举行的苹果春季发布会上,风靡全球的iPad Air迎来了家族第五代成员,虽然全面换装了强大的M1芯片,但内存容量依然是祖传64GB和256GB两个版本二选一,受到了广大网友的吐槽。
可见,在这个数据爆炸的时代,如何存储海量数据已经成了每个人的一道难题。个人用户尚且如此,对于企业来说就更是这样了。人工智能、数据挖掘、超高清视频,多样化的需求对数字时代企业的数据存储工作带来了严苛挑战。这一点也反应在了存储基础设施解决方案提供商的身上。
以大家熟知的希捷科技为例,根据官方数据,其2015年全年的存储发货总量达到了历史性的1ZB(1000000000000GB,1万亿GB)。而达到这一里程碑,则足足用了36年(1979-2015)的时间。四年后的2019年年底,希捷就将这一数字翻了个倍,全年的存储发货总量达到了2ZB。等到2021年,这一数字则来到了3ZB。这还仅仅是希捷一家的数据,可以说,整个全球市场对于海量数据的存储需求正以指数爆炸的趋势增长。
作为数字经济时代的石油,如何存好数据用好数据也是当今企业时刻思考的问题,招聘网站上日渐增多的数据挖掘/分析等岗位无疑是最好的证明。可是企业存取数据可不是简单的读取写入那么简单,除了基础的性能需求,能耗、维护管理、数据恢复等额外成本也是不可忽视的问题。
为了帮助企业更好应对数据存储带来的种种挑战,希捷推出了新一代PB级自修复存储系统——Exos CORVAULT,通过各项创新技术与设计来打造高性能、高可靠、高可用的存储方案。
希捷科技中国区高级技术经理 戴小勇
据希捷科技中国区高级技术经理戴小勇介绍,Exos CORVAULT基于希捷Exos 4U 106平台打造,从开发到发布用了差不多6年的时间,起初命名为Super Drive,随着磁盘容量的不断增长,最终改为了现在的CORVAULT。
这也体现了这款产品的定位,就是简单直接的块存储,外挂在整个服务器系统的后端,就像我们给自己的电脑或者笔记本加装硬盘一样,企业可直接通过部署CORVAULT来获取更大的存储容量,并且可以按需求改变其大小。
据了解,希捷的4U 106平台是目前业界领先的高密度存储解决方案,顾名思义,在4U高度的机箱内,最大可容纳106块3.5英寸硬盘,如果全部安装希捷EXOS X18硬盘,单台容量将达到1.9PB,如果是最新的Exos X20硬盘,则能达到2.1PB。
不过这可不是简单地把106块硬盘一股脑塞进机箱里那么简单,对硬件有一些了解的朋友都知道,机械硬盘在高速转动时会产生震动,而当106块7200转机械硬盘以下图这样的密度排列在一起时其产生的共振以及散热都成为了让人头疼的问题。
凭借自身的研发实力,希捷的工程师们最终解决了这样高密度排列下的种种问题,将整体方案的可靠性提升到了99.999%,实现了包括风扇、电源、控制器等部件的热插拔,更易于维护。在此基础上,高密度机箱的重量将近200磅(约合90公斤),在放置于机柜高层时,需要托盘有着非常强的承重能力。希捷提高了滑轨的刚性,让其在承受325磅(约合147公斤)的重量时也不会断裂。可以说,在提高密度这件事上,希捷将其做到了极致。
在Exos CORVAULT发布时,希捷特意强调它是一个“自修复存储系统”,自修复存储系统,这是通过怎样的方式来实现的呢?
这就不得不提到希捷独有的自动磁盘再生(ADR)和高级分布式自动保护技术(ADAPT)。前者基于希捷Exos X18和X20两款磁盘的自我纠正功能,加上系统固件的配合,实现了数据在线的磁盘自主恢复。后者则基于分布式概念,将每一个磁盘打造为单个I/O节点,而磁盘内的每一张碟片又相当于这一节点中的单个磁盘,当出现故障时会精准定位到某一个碟片或者磁头进行针对性修复,相比于传统的RAID阵列,不需要单独更换整块磁盘,大幅缩减了系统的恢复时间。在4U 106平台内有两块磁盘出现故障时,系统的风险时间间隔从传统RAID所需的55个小时缩减到了24分钟。
对于企业用户来说,运维成本是一笔不小的开支,虽然可以通过增加磁盘数量来应对,但与之相对应的维护成本也会随之飙升。但Exos CORVAULT可以有效解决这一问题,通过ADR和ADAPT技术的加持,运维能力不那么强的客户也能够轻松管理和使用。其内置的Redfish可轻松监控磁盘及机箱的运行状态,而Swordfish则负责软件的升级和日志监控等职责。
在此基础上,希捷为客户提供了一键式的配置方案,戴小勇介绍道,“客户可选择要求容量最大,还是要求性能最佳,并且通过我们此前对磁盘故障积累的大量经验,哪种情况下用什么方式去处理,这些在控制器软件里面都已经集成了,包括还有一些故障提前的预警,都会做在控制器的软件功能里面。”
最近几年科技行业一直关注的环保问题,希捷也有着自己的思考。据了解,希捷每年都会从客户那里返回大量报错的磁盘,但其中大概有30%的磁盘都是没有任何故障的磁盘,只需做简单维修就能继续使用,从前这种检测需要放在工厂进行,现在希捷希望将其直接集成到系统内部,从而减少这种浪费。
而真正有问题的磁盘又分为两种情况,一种是客户无法处理的小问题,另一种是真正有物理上的损伤而导致无法继续使用。前者也是可以通过磁盘的Firmware固件来进行修复,后者则可以通过回收后屏蔽坏掉的碟片来进行循环利用,从而减少电子垃圾的产生。
目前,希捷已经将磁盘容量提升到了20TB,未来将会发展到50TB甚至更大,这样一来满足更多数据存储需求的同时也降低了客户的总体拥有成本,降低能源的消耗和电子垃圾的产生,从而实现更加绿色环保的理念。对此,戴小勇表示:“未来我们还是沿用这个理念,提供更多、更好的产品,来满足我们客户在新的数据爆发年代基本的需求,保证他们业务的发展,提供良好的支撑。”
现在,希捷Exos CORVAULT平台已经被云服务提供商、HPC以及媒体娱乐行业所应用,通过自修复功能有效解决磁盘容量增长带来的运维成本增加的问题,此外希捷也正在和一些传统行业客户联合进行备份应用方面的测试。
希捷科技中国区新兴市场业务与存储系统业务负责人张晖表示:“希捷在不断的自我探索,自我更新,专注于怎么样帮助我们的客户降低数据的存储成本,在数据爆发的时代下,利用我们不断推陈出新的产品,来尽量帮助客户以最优的产品,用最高的存储空间。”
将简单的事做到极致,就是最大的成功,希捷正在存储这件看似简单的事上,做着不简单的事情。
本文属于原创文章,如若转载,请注明来源:数据爆炸时代的海量存储难题 希捷这样作答http://stor.zol.com.cn/788/7883371.html