0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

浪潮存储:新数据时代整体面临的三大挑战

铭瑄存储合作伙伴 来源:DOIT传媒 作者:DOIT传媒 2021-08-23 14:23 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

2021全球闪存峰会期间,浪潮存储产品线孙磊发表了题为《巨“浪潮”起——全闪存储系统 加速数字转型》的主题演讲,分享过去一年浪潮在全闪存方面的进步和发展。

从去年开始,浪潮一直在谈新数据时代,在谈新数据时代整体面临的三大挑战。

新时代的三大挑战

挑战1

数据成为生产要素

新数据时代,数据应用已经渗透到了经济社会各个领域,数据已成为核心生产要素,成为与劳动力、资本、土地和技术并驾的生产要素。作为生产要素,数据具有乘数作用,它可以放大劳动力、资本等生产要素在社会各行业价值链流转中产生的价值。

发挥好数据生产要素的创新引擎作用,可以催生和推动新产业、新业态、新模式,有助于推动质量变革、效率变革、动力变革,实现高质量发展。

比如,利用数据来做疫情防控。疫情早期,需要辅以CT来确认感染者,这导致CT量暴涨10倍,为一线医生带来了巨大工作量和非常高的诊断难度。

很快,数据专家基于大量的CT影像数据,训练出了阅片机器人,用机器人帮助医生进行诊断,从而大大节省了医生看片子的时间,同时提高了诊断的准确性。

挑战2

大规模应用

既然数据如此重要,就应该考虑解决数据保存、使用和管理的问题,解决存储的容量和效率问题。数据的数量级变化带来了巨大挑战。比如:

百度在北京有1万辆自动驾驶汽车,每天300PB数据,如果未来自动驾驶投入商业应用,一个城市几十万上百万辆车将产生ZB(100万个PB)级数据。

在数据容量和性能上,新兴应用场景产生了几十上百倍的提升,需要存储具备高容量、大并发、高带宽、更高性能和更低时延,这需要采用新技术来应对挑战。

挑战3

新数据需求

当前和未来很长一段时间,我们将采用多种技术来构建终端-边缘-两地三中心-混合云/公有云基础设施,这些技术的进步都非常快。

新技术背后还需要用新的存储,提供更高水平的数据流动、数据处理、数据共享、实时在线、永久安全等能力,实现信息高效计算和交互,在这一领域,软件定义存储有着天然优势。

浪潮存储坚持双轮驱动策略,紧跟技术趋势和应用需求,浪潮在存储的技术上也在做一些变革和突破,从而来让产品能够具备应对变化的能力。

上述提到的阅片机器人、自动驾驶的本质上是通过大量的机器学习所训练出来的一套带有自我预测能力的算法,而在当今社会,效率就是生命,各领域除了算法的优化,算力的存储方面唯有全闪介质才能提供更高的效率;

如何利用全闪介质发挥出更高的性能,浪潮全闪存储为您解答。

以新存储应对三大挑战

从2020年8月起,浪潮提出了新存储之道,所谓新存储之道,其核心就是通过极致的技术创新和产品创新来应对挑战。

浪潮用包括极简架构、极致安全、极致稳定、极致性能、极致容量、极致云化和极易管理,七大极致的技术路线来设计开发创新的HF系列全闪存储。

HF系列全闪存储目前在三个方面做出了比较大的创新:

1.架构层面。国内外存储厂商往往有多个软件栈,比如混闪和全闪的软件栈就不同,而浪潮同一套架构支持NVMe、SAS,一套架构支持所有的存储应用,这就是极简架构。

2.软件栈的重构,具体表现在以下几个方面。

2.1 当闪存介质达到一定数量时,CPU将成为性能瓶颈,浪潮通过多核多线程性能优化,充分发挥CPU的作用,从而进一步拔高全闪阵列的极限性能。

2.2 浪潮通过实时压缩重删进一步提高了数据的存储效率,保护用户投资,降低了TCO。

浪潮全闪阵列支持实时无损在线重删压缩

1、压缩数据8byte对齐,拿8K字节数据举例,压缩空间利用率99.8%;

2、内置独立加速芯片,对性能时延无影响;

3、当写入数据时,弱哈希+字节对比,确保重删效率数据一致性;

4、基于前压缩方式,数据在缓存中压缩(专用缓存。和压缩芯片),数据存入到磁盘是压缩后的数据量,固定条带,充分利用空间。数据库类应用压缩比例21,日志型应用最大压缩比例可达10:1;

2.3 持续的快速迭代。2020年,浪潮发布过iTurbo 1.0,2021年,iTurbo升级到2.0,iTurbo 2.0重点优化了三个方面。

第一个重点在于在I/O路径的优化上。iTurbo 2.0用智能数据路径打包整个I/O栈,使得I/O栈大大缩短,延迟得以明显降低。

第二个重点在于智能多核。如今的存储系统普遍没能发挥处理器的核数和主频性能优势,而iTurbo 2.0优化了对多核的利用,实现了对多核的智能调度,当发现有应用对性能有更高要求时,可以为应用绑定对应的CPU资源,能定向提升性能。

第三是重点是冷热分流。思路是,首先分离有效和无效数据,然后尽量把垃圾数据和无效数据聚合到同一个bolck里,减少数据刷新的波及范围,这样一来,不仅垃圾回收效率得以提高,而且,整体性能提升了1.5倍,时延降低了50%。

3.支持使用傲腾SSD,为了使用新型存储介质,浪潮和友商做了联合的定制开发,使用傲腾后,在数据分层的场景的IOPS提升了70%,带宽提高了100%,延时也降低了50%。

为了使用NVMe全闪协议,浪潮对整体软件栈,从底层硬件驱动层到上层协议全都进行了重构,实现了端到端的NVMe的协议,使得存储系统在读写性能和时延上都得到了大幅提升。

取得的成绩在SPC-1测试中已经得到体现

浪潮全闪存储HF18000G5-I,在即将发布的SPC-1榜单中将会有非常亮眼的成绩,再次打破世界记录,达到2300万IOPS,且延时在0.29ms内。

浪潮存储的优异市场表现

在市场表现中,浪潮是国内唯二进入Gartner魔力象限的主存储厂商,经过过去一段时间的发展,浪潮存储从利基象限跨越提升到了挑战者象限。

从用户满意度调查报告Gartner Peer Insight 的数据来看,浪潮存储在满意度调查报告中评分也非常高,达到了5分的满意度,可见整体的客户对于浪潮存储有高度认可。

受疫情影响,各个存储细分市场也受到了不同程度的影响,2020年第一季度,中国外部存储市场同比下降7.8%,出货量同比下降18.4%,全闪和混闪存储销售额分别同比增长16.1%和11.1%。

在这样的大背景下,浪潮在整体的集中式存储领域完成了大幅增长,出货量增长了50%,全闪的增速也达到了将近500%。

浪潮闪存存储的行业落地案例

某金融行业用户采用了浪潮的全闪方案。替换之后,在性能方面,整体系统性能提升了2倍。与此同时,浪潮对该客户所有存储产品进行了异构整合,整合完成后,客户运维成本和整体TCO有明显降低,设备利用率也有了明显提升。

某政府用户采用了浪潮整体解决方案,采用了包括关键应用主机系统浪潮天梭K1、Power主机、浪潮服务器以及浪潮存储等方案,该用户对于高端存储特别是高端全闪的可靠性有极致要求,配合K1主机以及OpenPower做了一个联合解决方案,在核心系统里构建了6个9的可靠性。

基于出色的产品能力,浪潮全闪存储赢得了越来越多的认可,正广泛应用于各行业、各场景,在各行各业里都有非常多的顶级客户。

比如,金融领域的六大行都有部署,而且,在许多银行有非常大规模的部署,在某大银行的核心系统里面,占比超20%。

某农信ODS业务使用了多台浪潮AS5600G2,为前端8台POWER小型机组成的Oracle RAC提供存储服务。为联社统一数据平台服务提供有力支撑。

在某大型国有银行数据中心建设中,浪潮存储全面对接OpenStack、兼容多家云平台,在各种业务系统尤其是网络交易相关的业务中,得到了用户青睐,浪潮存储助力其将所有业务放到云上,成为最快实现云化三数据中心(3DC)的国有大型银行。

在PB级客户方面,浪潮存储的客户数量同比增长150%,重复购买、扩容超过40%。

孙磊还表示,采用全闪的集中式存储未来面向就是核心应用。

浪潮认为,未来在核心应用和核心产品中,闪存将占主导地位。而浪潮还将继续坚持创新,以全闪存储系统加速数字转型。

编辑:jq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    213

    文章

    30586

    浏览量

    219597
  • 数据
    +关注

    关注

    8

    文章

    7315

    浏览量

    93983
  • CT
    CT
    +关注

    关注

    2

    文章

    203

    浏览量

    34461
  • 自动驾驶
    +关注

    关注

    791

    文章

    14671

    浏览量

    176540

原文标题:浪潮存储:以全闪存储加速数字转型

文章出处:【微信号:Maxsun,微信公众号:铭瑄存储合作伙伴】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    FOPLP工艺面临挑战

    FOPLP 技术目前仍面临诸多挑战,包括:芯片偏移、面板翘曲、RDL工艺能力、配套设备和材料、市场应用等方面。
    的头像 发表于 07-21 10:19 1143次阅读
    FOPLP工艺<b class='flag-5'>面临</b>的<b class='flag-5'>挑战</b>

    AI 时代来袭,手机芯片面临哪些新挑战

    边缘AI、生成式AI(GenAI)以及下一代通信技术正为本已面临高性能与低功耗压力的手机带来更多计算负载。领先的智能手机厂商正努力应对本地化生成式AI、常规手机功能以及与云之间日益增长的数据传输需求
    的头像 发表于 06-10 08:34 941次阅读
    AI <b class='flag-5'>时代</b>来袭,手机芯片<b class='flag-5'>面临</b>哪些新<b class='flag-5'>挑战</b>?

    数智化时代数据存储“进化论”该如何书写?

    。Gartner预测,到2028年,企业软件应用中具备自主性AI的比例将从不到1%升至33%,30%的企业机构会把数据变现或入表纳入数据战略。在此背景下,作为数据承载关键设施的存储,正
    的头像 发表于 04-16 11:21 494次阅读
    数智化<b class='flag-5'>时代</b>,<b class='flag-5'>数据</b><b class='flag-5'>存储</b>“进化论”该如何书写?

    华为加速AI时代数据存储产业发展

    近日,在华为中国合作伙伴大会2025上,华为数据存储产品线总裁周跃峰发表“共筑数智解决方案,共享数据存储产业大发展”主题演讲,深入探讨如何加速AI行业化落地,并分享AI
    的头像 发表于 04-01 15:35 902次阅读

    智慧路灯的推广面临哪些挑战

    引言 在智慧城市建设的宏伟蓝图中,叁仟智慧路灯的推广面临哪些挑战?叁仟智慧路灯作为重要的基础设施,承载着提升城市照明智能化水平、实现多功能集成服务的使命。然而,尽管叁仟智慧路灯前景广阔,在推广过程中
    的头像 发表于 03-27 17:02 522次阅读

    Solidigm高密度方案解决数据中心存储难题,赋能AI创新发展

    QLC在内的丰富产品组合,打破从数据中心到边缘应用面临存储瓶颈,提升人工智能效率,释放人工智能潜能。 当AI的发展突破界限,算力与存力的天平被重新校准。在AI 浪潮下,传统HDD
    的头像 发表于 03-13 15:36 923次阅读

    智慧路灯在数据采集与分析方面面临挑战

    叁仟智慧路灯作为现代城市基础设施的重要组成部分,通过集成多种传感器、通信模块和智能控制算法,实现了高效节能、多功能集成和智能化管理。然而,在数据采集与分析方面,智慧路灯仍面临诸多挑战。 一、技术
    的头像 发表于 03-11 21:22 444次阅读
    智慧路灯在<b class='flag-5'>数据</b>采集与分析方面<b class='flag-5'>面临</b>的<b class='flag-5'>挑战</b>

    如今AI在不断发展,做连接器行业的更应该注意什么?

    在这一浪潮中既面临着巨大的机遇,也迎来了前所未有的挑战。 因此作为蓬生电子的一员,很关注诸如此类的问题,如何能在人工智能时代抓住机遇,实现长远发展?是我们需要思考的问题。
    发表于 02-08 17:04

    浪潮信息存储SATA SSD:技术创新引领数据存储时代

    在智慧时代数据存储需求日益增长,对存储产品的性能和稳定性提出了更高要求。浪潮信息存储,作为行业
    的头像 发表于 02-07 13:41 1012次阅读

    浪潮信息存储SATA SSD:以技术创新,开启数据存储新篇章

    北京2025年1月23日 /美通社/ -- 在全球数字化转型的浪潮中,数据已成为驱动社会进步和创新的核心动力。随着互联网、人工智能、大数据等技术的飞速发展,全球数据量呈现爆炸式增长。企
    的头像 发表于 01-24 10:02 699次阅读

    QLC存储新里程:德明利探索高效存储之路,赋能数据时代新需求

    在大数据和人工智能时代数据存储需求呈指数级增长,市场对存储媒介的性能、容量和能效提出了更高要求。随着闪存技术向高
    的头像 发表于 01-21 16:00 1481次阅读
    QLC<b class='flag-5'>存储</b>新里程:德明利探索高效<b class='flag-5'>存储</b>之路,赋能<b class='flag-5'>数据</b><b class='flag-5'>时代</b>新需求

    浪潮信息首提机柜级和数据中心级两大存储底座

    AIGC时代数据中心正在经历一场深刻的变革,数据中心逐渐向数据型中心演进。在这个过程中,人工智能与数据要素正日益凸显成为
    的头像 发表于 01-10 11:30 1236次阅读

    浪潮信息剖析智能时代数据存储领域面临挑战与机遇

    在当今数字化时代,算力与存力的协同增长已成为驱动各行各业发展的关键力量。特别是在人工智能(AI)这一前沿领域,随着数据量的爆炸式增长,对存储系统的需求日益复杂和多样。近期,在首届CCF中国存储
    的头像 发表于 12-30 09:43 1196次阅读

    戴尔数据湖仓助力企业数字化转型

    在数字化转型的浪潮下,企业正面临着前所未有的数据挑战。从传统的结构化数据到如今的非结构化数据、半
    的头像 发表于 12-20 09:31 772次阅读

    探讨大模型时代背景下数据存储的变革之道

    在当今数字化浪潮汹涌澎湃的时代背景下,大模型技术犹如一颗璀璨的明星,照亮了科技发展的广阔苍穹,而存储技术的变革,作为这一进程中的坚实基石,正日益成为产业界与学术界共同瞩目的核心焦点。
    的头像 发表于 12-16 14:05 963次阅读