0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

浪潮存储:新数据时代整体面临的三大挑战

铭瑄存储合作伙伴 来源:DOIT传媒 作者:DOIT传媒 2021-08-23 14:23 次阅读

2021全球闪存峰会期间,浪潮存储产品线孙磊发表了题为《巨“浪潮”起——全闪存储系统 加速数字转型》的主题演讲,分享过去一年浪潮在全闪存方面的进步和发展。

从去年开始,浪潮一直在谈新数据时代,在谈新数据时代整体面临的三大挑战。

新时代的三大挑战

挑战1

数据成为生产要素

新数据时代,数据应用已经渗透到了经济社会各个领域,数据已成为核心生产要素,成为与劳动力、资本、土地和技术并驾的生产要素。作为生产要素,数据具有乘数作用,它可以放大劳动力、资本等生产要素在社会各行业价值链流转中产生的价值。

发挥好数据生产要素的创新引擎作用,可以催生和推动新产业、新业态、新模式,有助于推动质量变革、效率变革、动力变革,实现高质量发展。

比如,利用数据来做疫情防控。疫情早期,需要辅以CT来确认感染者,这导致CT量暴涨10倍,为一线医生带来了巨大工作量和非常高的诊断难度。

很快,数据专家基于大量的CT影像数据,训练出了阅片机器人,用机器人帮助医生进行诊断,从而大大节省了医生看片子的时间,同时提高了诊断的准确性。

挑战2

大规模应用

既然数据如此重要,就应该考虑解决数据保存、使用和管理的问题,解决存储的容量和效率问题。数据的数量级变化带来了巨大挑战。比如:

百度在北京有1万辆自动驾驶汽车,每天300PB数据,如果未来自动驾驶投入商业应用,一个城市几十万上百万辆车将产生ZB(100万个PB)级数据。

在数据容量和性能上,新兴应用场景产生了几十上百倍的提升,需要存储具备高容量、大并发、高带宽、更高性能和更低时延,这需要采用新技术来应对挑战。

挑战3

新数据需求

当前和未来很长一段时间,我们将采用多种技术来构建终端-边缘-两地三中心-混合云/公有云基础设施,这些技术的进步都非常快。

新技术背后还需要用新的存储,提供更高水平的数据流动、数据处理、数据共享、实时在线、永久安全等能力,实现信息高效计算和交互,在这一领域,软件定义存储有着天然优势。

浪潮存储坚持双轮驱动策略,紧跟技术趋势和应用需求,浪潮在存储的技术上也在做一些变革和突破,从而来让产品能够具备应对变化的能力。

上述提到的阅片机器人、自动驾驶的本质上是通过大量的机器学习所训练出来的一套带有自我预测能力的算法,而在当今社会,效率就是生命,各领域除了算法的优化,算力的存储方面唯有全闪介质才能提供更高的效率;

如何利用全闪介质发挥出更高的性能,浪潮全闪存储为您解答。

以新存储应对三大挑战

从2020年8月起,浪潮提出了新存储之道,所谓新存储之道,其核心就是通过极致的技术创新和产品创新来应对挑战。

浪潮用包括极简架构、极致安全、极致稳定、极致性能、极致容量、极致云化和极易管理,七大极致的技术路线来设计开发创新的HF系列全闪存储。

HF系列全闪存储目前在三个方面做出了比较大的创新:

1.架构层面。国内外存储厂商往往有多个软件栈,比如混闪和全闪的软件栈就不同,而浪潮同一套架构支持NVMe、SAS,一套架构支持所有的存储应用,这就是极简架构。

2.软件栈的重构,具体表现在以下几个方面。

2.1 当闪存介质达到一定数量时,CPU将成为性能瓶颈,浪潮通过多核多线程性能优化,充分发挥CPU的作用,从而进一步拔高全闪阵列的极限性能。

2.2 浪潮通过实时压缩重删进一步提高了数据的存储效率,保护用户投资,降低了TCO。

浪潮全闪阵列支持实时无损在线重删压缩

1、压缩数据8byte对齐,拿8K字节数据举例,压缩空间利用率99.8%;

2、内置独立加速芯片,对性能时延无影响;

3、当写入数据时,弱哈希+字节对比,确保重删效率数据一致性;

4、基于前压缩方式,数据在缓存中压缩(专用缓存。和压缩芯片),数据存入到磁盘是压缩后的数据量,固定条带,充分利用空间。数据库类应用压缩比例21,日志型应用最大压缩比例可达10:1;

2.3 持续的快速迭代。2020年,浪潮发布过iTurbo 1.0,2021年,iTurbo升级到2.0,iTurbo 2.0重点优化了三个方面。

第一个重点在于在I/O路径的优化上。iTurbo 2.0用智能数据路径打包整个I/O栈,使得I/O栈大大缩短,延迟得以明显降低。

第二个重点在于智能多核。如今的存储系统普遍没能发挥处理器的核数和主频性能优势,而iTurbo 2.0优化了对多核的利用,实现了对多核的智能调度,当发现有应用对性能有更高要求时,可以为应用绑定对应的CPU资源,能定向提升性能。

第三是重点是冷热分流。思路是,首先分离有效和无效数据,然后尽量把垃圾数据和无效数据聚合到同一个bolck里,减少数据刷新的波及范围,这样一来,不仅垃圾回收效率得以提高,而且,整体性能提升了1.5倍,时延降低了50%。

3.支持使用傲腾SSD,为了使用新型存储介质,浪潮和友商做了联合的定制开发,使用傲腾后,在数据分层的场景的IOPS提升了70%,带宽提高了100%,延时也降低了50%。

为了使用NVMe全闪协议,浪潮对整体软件栈,从底层硬件驱动层到上层协议全都进行了重构,实现了端到端的NVMe的协议,使得存储系统在读写性能和时延上都得到了大幅提升。

取得的成绩在SPC-1测试中已经得到体现

浪潮全闪存储HF18000G5-I,在即将发布的SPC-1榜单中将会有非常亮眼的成绩,再次打破世界记录,达到2300万IOPS,且延时在0.29ms内。

浪潮存储的优异市场表现

在市场表现中,浪潮是国内唯二进入Gartner魔力象限的主存储厂商,经过过去一段时间的发展,浪潮存储从利基象限跨越提升到了挑战者象限。

从用户满意度调查报告Gartner Peer Insight 的数据来看,浪潮存储在满意度调查报告中评分也非常高,达到了5分的满意度,可见整体的客户对于浪潮存储有高度认可。

受疫情影响,各个存储细分市场也受到了不同程度的影响,2020年第一季度,中国外部存储市场同比下降7.8%,出货量同比下降18.4%,全闪和混闪存储销售额分别同比增长16.1%和11.1%。

在这样的大背景下,浪潮在整体的集中式存储领域完成了大幅增长,出货量增长了50%,全闪的增速也达到了将近500%。

浪潮闪存存储的行业落地案例

某金融行业用户采用了浪潮的全闪方案。替换之后,在性能方面,整体系统性能提升了2倍。与此同时,浪潮对该客户所有存储产品进行了异构整合,整合完成后,客户运维成本和整体TCO有明显降低,设备利用率也有了明显提升。

某政府用户采用了浪潮整体解决方案,采用了包括关键应用主机系统浪潮天梭K1、Power主机、浪潮服务器以及浪潮存储等方案,该用户对于高端存储特别是高端全闪的可靠性有极致要求,配合K1主机以及OpenPower做了一个联合解决方案,在核心系统里构建了6个9的可靠性。

基于出色的产品能力,浪潮全闪存储赢得了越来越多的认可,正广泛应用于各行业、各场景,在各行各业里都有非常多的顶级客户。

比如,金融领域的六大行都有部署,而且,在许多银行有非常大规模的部署,在某大银行的核心系统里面,占比超20%。

某农信ODS业务使用了多台浪潮AS5600G2,为前端8台POWER小型机组成的Oracle RAC提供存储服务。为联社统一数据平台服务提供有力支撑。

在某大型国有银行数据中心建设中,浪潮存储全面对接OpenStack、兼容多家云平台,在各种业务系统尤其是网络交易相关的业务中,得到了用户青睐,浪潮存储助力其将所有业务放到云上,成为最快实现云化三数据中心(3DC)的国有大型银行。

在PB级客户方面,浪潮存储的客户数量同比增长150%,重复购买、扩容超过40%。

孙磊还表示,采用全闪的集中式存储未来面向就是核心应用。

浪潮认为,未来在核心应用和核心产品中,闪存将占主导地位。而浪潮还将继续坚持创新,以全闪存储系统加速数字转型。

编辑:jq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    206

    文章

    27033

    浏览量

    201393
  • 数据
    +关注

    关注

    8

    文章

    6511

    浏览量

    87596
  • CT
    CT
    +关注

    关注

    2

    文章

    179

    浏览量

    31772
  • 自动驾驶
    +关注

    关注

    773

    文章

    13032

    浏览量

    163210

原文标题:浪潮存储:以全闪存储加速数字转型

文章出处:【微信号:Maxsun,微信公众号:铭瑄存储合作伙伴】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    AI 时代数据存储管理新挑战分论坛圆满举办

    12 月 16 日,AI 时代数据存储管理新挑战分论坛在无锡成功召开,会上来自蚂蚁集团、SphereEx、平凯星辰、九章云极 DataCanvas、StreamNative、腾讯云和华为的技术专家
    的头像 发表于 12-22 10:51 208次阅读
    AI <b class='flag-5'>时代数据</b><b class='flag-5'>存储</b>管理新<b class='flag-5'>挑战</b>分论坛圆满举办

    AI时代数据存储管理新挑战分论坛圆满举办

    12月16日,AI时代数据存储管理新挑战分论坛在无锡成功召开,会上来自蚂蚁集团、SphereEx、平凯星辰、九章云极DataCanvas、StreamNative、腾讯云和华为的技术专家,共同
    的头像 发表于 12-20 09:40 178次阅读

    微波GaN HEMT 技术面临挑战

    报告内容包含: 微带WBG MMIC工艺 GaN HEMT 结构的生长 GaN HEMT 技术面临挑战
    发表于 12-14 11:06 202次阅读
    微波GaN HEMT 技术<b class='flag-5'>面临</b>的<b class='flag-5'>挑战</b>

    数聚AI ∙ 智慧未来 | 浪潮信息存储助力企业基于大模型实现数字化创新

    2023年生成式AI和大模型的爆发,让我们面对一个变化更加快速也更加激动人心的时代,随着新质生产力和算力基础设施高质量发展的提出,算力和存储基础设施也面临着创新与破局,如何在生成式AI和大模型
    的头像 发表于 11-30 16:25 215次阅读
    数聚AI ∙ 智慧未来 | <b class='flag-5'>浪潮</b>信息<b class='flag-5'>存储</b>助力企业基于大模型实现数字化创新

    全球汽车半导体面临挑战 分析师称有库存过剩担忧

    外媒在报道中提到,汽车半导体面临库存过剩担忧,主要是因为需求减少。电动汽车需求不振被认为是导致这一行业低迷的一个因素,汽车半导体需求减少则是根本原因。
    的头像 发表于 11-27 17:02 502次阅读

    关乎国计民生,电力行业的数据存储正在面临哪些挑战

    存储器作为电力网关中数据的承载者,其品质、性能稳定性对于电力监测系统的表现具有决定性作用 ,进而对整个电力系统的运作产生深刻影响。 那么,当前电力行业在数据存储方向
    的头像 发表于 11-20 18:50 255次阅读

    智慧经济时代浪潮信息存储为智慧世界构筑数据基石

    11月12日,第八届中国数据分析行业峰会在京举办,浪潮信息亮相峰会并发表《数据要素驱动智慧时代》主题演讲。在数据的采传用管存销六个环节中,
    的头像 发表于 11-17 16:55 192次阅读
    智慧经济<b class='flag-5'>时代</b>,<b class='flag-5'>浪潮</b>信息<b class='flag-5'>存储</b>为智慧世界构筑<b class='flag-5'>数据</b>基石

    便携式医疗监控系统面临的设计挑战

    电子发烧友网站提供《便携式医疗监控系统面临的设计挑战.doc》资料免费下载
    发表于 11-10 09:48 0次下载
    便携式医疗监控系统<b class='flag-5'>面临</b>的设计<b class='flag-5'>挑战</b>

    为什么web3时代数据存储方式,Filecoin是理想的方式?

    为什么web3时代数据存储方式,Filecoin是理想的方式? 随着区块链技术和去中心化应用程序(dapps)的普及,数据管理和存储已经成
    的头像 发表于 10-26 11:16 214次阅读

    浪潮信息澎湃认证:浪潮信息集中式存储携手达梦数据库管理系统V8完成兼容性认证

    近日, 达梦数据库管理系统V8与浪潮信息集中式存储AS/HF系列产品完成并通过浪潮信息澎湃技术相互兼容性测试认证 ,测试结果显示,达梦数据
    的头像 发表于 09-27 17:10 374次阅读
    <b class='flag-5'>浪潮</b>信息澎湃认证:<b class='flag-5'>浪潮</b>信息集中式<b class='flag-5'>存储</b>携手达梦<b class='flag-5'>数据</b>库管理系统V8完成兼容性认证

    从源头出发,浪潮信息智能备电控制方案提升数据存储可靠性

    数据是社会发展的基础资源。随着数字经济时代到来,爆发式增长的数据量为用户生活带来便利,也为企业智能化发展提供动力。 存储作为数据载体设备发挥
    的头像 发表于 09-07 16:50 275次阅读
    从源头出发,<b class='flag-5'>浪潮</b>信息智能备电控制方案提升<b class='flag-5'>数据</b><b class='flag-5'>存储</b>可靠性

    华为发布大模型时代AI存储新品

    7月14日,华为发布大模型时代AI存储新品, 为基础模型训练、行业模型训练,细分场景模型训练推理提供存储最优解,释放AI新动能。 企业在开发及实施大模型应用过程中,面临四大
    的头像 发表于 07-14 15:20 543次阅读
    华为发布大模型<b class='flag-5'>时代</b>AI<b class='flag-5'>存储</b>新品

    浪潮信息澎湃认证:浪潮分布式存储携手博雅云OneSRM SMP存储管理平台完成兼容性认证

    近日, 博雅云OneSRM SMP存储管理平台与浪潮分布式存储AS13000系列产品完成并通过浪潮信息澎湃技术相互兼容性测试认证 ,测试结果显示,博雅云OneSRM SMP
    的头像 发表于 07-12 09:15 373次阅读
    <b class='flag-5'>浪潮</b>信息澎湃认证:<b class='flag-5'>浪潮</b>分布式<b class='flag-5'>存储</b>携手博雅云OneSRM SMP<b class='flag-5'>存储</b>管理平台完成兼容性认证

    分布式存储架构面临挑战

      从云和互联网的业务场景来看,其存储域主要采用基于服务器部署分布式存储服务的融合方式,它面临如下挑战 : 1.数据保存周期与服务器更新周期
    的头像 发表于 07-05 10:44 944次阅读
    分布式<b class='flag-5'>存储</b>架构<b class='flag-5'>面临</b>的<b class='flag-5'>挑战</b>

    融合互通,浪潮分布式融合存储AS13000加速海量数据处理

    智慧时代数据量激增且非结构化数据的占比逐渐增大,数据类型愈发复杂,处理数据的方式更加多样化,传统单一
    的头像 发表于 06-07 10:57 385次阅读
    融合互通,<b class='flag-5'>浪潮</b>分布式融合<b class='flag-5'>存储</b>AS13000加速海量<b class='flag-5'>数据</b>处理