加入收藏 | 设为首页 | 会员中心 | 我要投稿 应用网_阳江站长网 (https://www.0662zz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 创业 > 模式 > 正文

浪潮产品总监赵帅:面向新数据时代的分布式存储平台

发布时间:2019-12-25 12:23:39 所属栏目:模式 来源:DOIT
导读:12月3日,为期两天、由百易传媒(DOIT)主办的2019中国数据与存储峰会(DATA STORAGE SUMMIT)在北京盛大开幕,与会专家对新一代存储技术趋势及数据创新应用进行了热议,大家一致认为数据存储将成为数字产业发展的关键推动力,驱动中国和企业数字化转型。

AS13000G5把之前90%的安全水位通过多机制和哈希计算系数提高到95%空间利用率,增长5%的点给用户带来的效益,用户一次系统采购当中可以少买几个节点,少买几十块硬盘,是一个比较有经济效益的优点,除此之外我们还有千亿级文件的支持,很多客户项目当中,很多时候客户一天落到系统中需要落一亿个文件,文件保存周期虽然不长,但是进行了半个月或者是说一个月保存中需要分布式存储支持千亿级文件。浪潮经过了国家级第三方测试机构的验证,支持千亿级的文件。

分布式存储更多的是去对接前端的云和前端的虚拟化,最近一两年做了一件事和云进行了全面的对接,取得了Openstack和VMmare的支持,不需要担心系统的兼容性的问题。还有一点特别灵活,AS13000G5支持第二次开发,浪潮存储给用户开放一些源代码,和用户一起适配调试优化,在很多高性能场景当中取得了非常好的效果,在不经过优化的情况下,一个存储的节点可以跑出1.5到1.8的性能,优化之后单节点可以跑出2.5 G的性能。除此之外,上一代的AS13000产品,分布式存储的规模一个集群就是5120个节点,这一代也没有变;变化的是说每个节点最大容量变了,现在支持EB级的容量。

我们发现,有很多客户初始化配置的时候都是五个PB或者十个PB数据量起,确实是说我们遇到了数据爆炸式增长的问题,相信未来我们会越来越多用分布式存储整合数据中心当中各种各样不同的数据,整合我们数据中心当中各种各样的传统应用以及智能应用。

3)协议自由转换,轻松上云

接下来我们重点看一些有特色的亮点。前面提到了我们有一个概念叫多合一还有5+X,现在友商也都在做。就是说,无论大家去做多个系统的统一管理还是说做一个单一系统的多种服务,这里边会有一个绕不开的话题,就是协议的自由转化,我现在接触到了前端有一些客户,他反馈的一个要求就是在本次采购,这一次IT系统建设的时候,不知道应该采购什么样的分布式存储,不知道买分布式文件还是买分布式对象,未来有可能上云,上云可能会对接S3,现在有可能业务偏向于文件。因为我们支持有一种技术叫多元零拷贝的技术,这种技术直白翻译过来相当于支持协议的自由转换。怎么说呢?就是说用户在最开始部署的时候可以部署分布式文件,可以存了很多数个TB的文件级的数据落到存储上,后来有一天不想迁移修改,想把数据转变成对象的数据,对外提供对象的服务,我们可以不需要经过任何的其他的产品的帮助,不需要经过底层的数据迁移拷贝镜像,把这个数据从文件数据转化为对象数据。

为什么支持这样做,我们多合一最开始设计的时候,就是协议的自由转换来支持的多合一。这个设计的思路从2013年发布AS13000就没有变过,六年的时间我们软件栈在原有设计思路上没有转换,没有切换过软件栈。

浪潮产品总监赵帅:面向新数据时代的分布式存储平台

4)满足不同业务需求的多中心容灾

很多用户完成了一个数据中心的生命周期管理的时候,往往考虑下一步在异地建第二个数据中心,可能会有一个三到五年的规划,涉及到了双活数据中心以及两地三中心,在很多金融行业都有实际落地。大家平时关注IDC分析报告,分布式存储圈子里面,文件、块和对象三种数据服务发展最快是对象,未来增长率最高是对象。浪潮存储支持了对象的多数据中心的容灾,多数据中心容灾体验就和传统的集中式的存储是一样的,比如说基于存储做双活,基于存储做两地三中心,采用的技术架构也差不多,这里边有一点就是第三条,支持智能WAN加速。

智能WAN加速是什么样技术?在多数据中心之间采用异步数据复制,可以降低30%到50%链路带宽。在容灾解决方案的建设过程当中,有一半左右的预算被链路开销掉了,对用户来说也是非常大的一笔节省,是智能WAN加速带来的体验。分布式存储在未来可以帮助越来越多的客户去构建容灾的系统。

从2019年上半年到现在下半年这么一年时间,在互联网以及金融领域,越来越多的客户在考虑用对象存储去做双活去做两地三中心。

5)智能运维AIOps

分布式存储有一个概念是要存取海量数据,所以要求分布式存储要能够不断的去扩展自己的规模。随着时间的推移,我们会发现分布式存储可能节点数量会达到一百多个节点,会有好几千块硬盘需要用户不停的去管理去更换去运维。有没有一个非常智能的一套软件能够帮助用户的运维人员减轻管理和运维的压力?是有的。浪潮有一款叫InView智能管理软件可以管理浪潮全系列的存储,包括集中式的混闪全闪以及分布式存储,这款软件部署之后,对环境内部所有的分布式存储节点进行智能化存储,用户调节所有节点配置的时候,只需要在同一管理界面进行简单两到三步操作就可以批量化配置。像故障监控包括性能预测,各个厂商也都提到了。

这里边说一个重点是深度优化的功能,硬盘的故障预测,我们过去三年里面从厂商收集了五十万块硬盘的日志,拿回到数据中心实验的环境下通过机器学习和AI分析之后,发现市场上常见的硬盘故障可以被预测的,比如说希捷,英特尔的,故障预测准确率达到了两周时间周期内85%的精度。也就是说在统一管理软件界面下,可以给用户提供硬盘故障率智能感知,分布式存储上面三千块硬盘,未来两周之内会坏的是几块硬盘。目前这套智能管理系统,包括我们的硬盘故障预测这个功能是促销的,在2019年以及2020年上半年都不会收费,跟随着AS13000G5一起销售。

浪潮分布式存储,国内领先

浪潮产品总监赵帅:面向新数据时代的分布式存储平台

大家都知道,分布式存储用户一旦采购了之后,就是在原有的分布式存储上进行不断的扩容。因为分布式存储这个容量增速比集中式存储大的,里边存的大多数存的非结构化数据,经过后台数据分析发现,确实有比较不错的成绩。重复购买率比较高,41%,也就是说每卖出去一百套,最终会有41个客户会进行重复的采购和扩容。这个是我们现在取得的一个比较好的成绩,前面提到了分布式存储和云对接,大家都知道云无论是像公有云还是私有云这样的分类,还是说你去按照政务云、企业云、通信云等等这样分类,都可以用分布式存储承载用户前端各种应用。

(编辑:应用网_阳江站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

推荐文章
    热点阅读