0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

浪潮存储:新数据时代整体面临的三大挑战

铭瑄存储合作伙伴 来源:DOIT传媒 作者:DOIT传媒 2021-08-23 14:23 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

2021全球闪存峰会期间,浪潮存储产品线孙磊发表了题为《巨“浪潮”起——全闪存储系统 加速数字转型》的主题演讲,分享过去一年浪潮在全闪存方面的进步和发展。

从去年开始,浪潮一直在谈新数据时代,在谈新数据时代整体面临的三大挑战。

新时代的三大挑战

挑战1

数据成为生产要素

新数据时代,数据应用已经渗透到了经济社会各个领域,数据已成为核心生产要素,成为与劳动力、资本、土地和技术并驾的生产要素。作为生产要素,数据具有乘数作用,它可以放大劳动力、资本等生产要素在社会各行业价值链流转中产生的价值。

发挥好数据生产要素的创新引擎作用,可以催生和推动新产业、新业态、新模式,有助于推动质量变革、效率变革、动力变革,实现高质量发展。

比如,利用数据来做疫情防控。疫情早期,需要辅以CT来确认感染者,这导致CT量暴涨10倍,为一线医生带来了巨大工作量和非常高的诊断难度。

很快,数据专家基于大量的CT影像数据,训练出了阅片机器人,用机器人帮助医生进行诊断,从而大大节省了医生看片子的时间,同时提高了诊断的准确性。

挑战2

大规模应用

既然数据如此重要,就应该考虑解决数据保存、使用和管理的问题,解决存储的容量和效率问题。数据的数量级变化带来了巨大挑战。比如:

百度在北京有1万辆自动驾驶汽车,每天300PB数据,如果未来自动驾驶投入商业应用,一个城市几十万上百万辆车将产生ZB(100万个PB)级数据。

在数据容量和性能上,新兴应用场景产生了几十上百倍的提升,需要存储具备高容量、大并发、高带宽、更高性能和更低时延,这需要采用新技术来应对挑战。

挑战3

新数据需求

当前和未来很长一段时间,我们将采用多种技术来构建终端-边缘-两地三中心-混合云/公有云基础设施,这些技术的进步都非常快。

新技术背后还需要用新的存储,提供更高水平的数据流动、数据处理、数据共享、实时在线、永久安全等能力,实现信息高效计算和交互,在这一领域,软件定义存储有着天然优势。

浪潮存储坚持双轮驱动策略,紧跟技术趋势和应用需求,浪潮在存储的技术上也在做一些变革和突破,从而来让产品能够具备应对变化的能力。

上述提到的阅片机器人、自动驾驶的本质上是通过大量的机器学习所训练出来的一套带有自我预测能力的算法,而在当今社会,效率就是生命,各领域除了算法的优化,算力的存储方面唯有全闪介质才能提供更高的效率;

如何利用全闪介质发挥出更高的性能,浪潮全闪存储为您解答。

以新存储应对三大挑战

从2020年8月起,浪潮提出了新存储之道,所谓新存储之道,其核心就是通过极致的技术创新和产品创新来应对挑战。

浪潮用包括极简架构、极致安全、极致稳定、极致性能、极致容量、极致云化和极易管理,七大极致的技术路线来设计开发创新的HF系列全闪存储。

HF系列全闪存储目前在三个方面做出了比较大的创新:

1.架构层面。国内外存储厂商往往有多个软件栈,比如混闪和全闪的软件栈就不同,而浪潮同一套架构支持NVMe、SAS,一套架构支持所有的存储应用,这就是极简架构。

2.软件栈的重构,具体表现在以下几个方面。

2.1 当闪存介质达到一定数量时,CPU将成为性能瓶颈,浪潮通过多核多线程性能优化,充分发挥CPU的作用,从而进一步拔高全闪阵列的极限性能。

2.2 浪潮通过实时压缩重删进一步提高了数据的存储效率,保护用户投资,降低了TCO。

浪潮全闪阵列支持实时无损在线重删压缩

1、压缩数据8byte对齐,拿8K字节数据举例,压缩空间利用率99.8%;

2、内置独立加速芯片,对性能时延无影响;

3、当写入数据时,弱哈希+字节对比,确保重删效率数据一致性;

4、基于前压缩方式,数据在缓存中压缩(专用缓存。和压缩芯片),数据存入到磁盘是压缩后的数据量,固定条带,充分利用空间。数据库类应用压缩比例21,日志型应用最大压缩比例可达10:1;

2.3 持续的快速迭代。2020年,浪潮发布过iTurbo 1.0,2021年,iTurbo升级到2.0,iTurbo 2.0重点优化了三个方面。

第一个重点在于在I/O路径的优化上。iTurbo 2.0用智能数据路径打包整个I/O栈,使得I/O栈大大缩短,延迟得以明显降低。

第二个重点在于智能多核。如今的存储系统普遍没能发挥处理器的核数和主频性能优势,而iTurbo 2.0优化了对多核的利用,实现了对多核的智能调度,当发现有应用对性能有更高要求时,可以为应用绑定对应的CPU资源,能定向提升性能。

第三是重点是冷热分流。思路是,首先分离有效和无效数据,然后尽量把垃圾数据和无效数据聚合到同一个bolck里,减少数据刷新的波及范围,这样一来,不仅垃圾回收效率得以提高,而且,整体性能提升了1.5倍,时延降低了50%。

3.支持使用傲腾SSD,为了使用新型存储介质,浪潮和友商做了联合的定制开发,使用傲腾后,在数据分层的场景的IOPS提升了70%,带宽提高了100%,延时也降低了50%。

为了使用NVMe全闪协议,浪潮对整体软件栈,从底层硬件驱动层到上层协议全都进行了重构,实现了端到端的NVMe的协议,使得存储系统在读写性能和时延上都得到了大幅提升。

取得的成绩在SPC-1测试中已经得到体现

浪潮全闪存储HF18000G5-I,在即将发布的SPC-1榜单中将会有非常亮眼的成绩,再次打破世界记录,达到2300万IOPS,且延时在0.29ms内。

浪潮存储的优异市场表现

在市场表现中,浪潮是国内唯二进入Gartner魔力象限的主存储厂商,经过过去一段时间的发展,浪潮存储从利基象限跨越提升到了挑战者象限。

从用户满意度调查报告Gartner Peer Insight 的数据来看,浪潮存储在满意度调查报告中评分也非常高,达到了5分的满意度,可见整体的客户对于浪潮存储有高度认可。

受疫情影响,各个存储细分市场也受到了不同程度的影响,2020年第一季度,中国外部存储市场同比下降7.8%,出货量同比下降18.4%,全闪和混闪存储销售额分别同比增长16.1%和11.1%。

在这样的大背景下,浪潮在整体的集中式存储领域完成了大幅增长,出货量增长了50%,全闪的增速也达到了将近500%。

浪潮闪存存储的行业落地案例

某金融行业用户采用了浪潮的全闪方案。替换之后,在性能方面,整体系统性能提升了2倍。与此同时,浪潮对该客户所有存储产品进行了异构整合,整合完成后,客户运维成本和整体TCO有明显降低,设备利用率也有了明显提升。

某政府用户采用了浪潮整体解决方案,采用了包括关键应用主机系统浪潮天梭K1、Power主机、浪潮服务器以及浪潮存储等方案,该用户对于高端存储特别是高端全闪的可靠性有极致要求,配合K1主机以及OpenPower做了一个联合解决方案,在核心系统里构建了6个9的可靠性。

基于出色的产品能力,浪潮全闪存储赢得了越来越多的认可,正广泛应用于各行业、各场景,在各行各业里都有非常多的顶级客户。

比如,金融领域的六大行都有部署,而且,在许多银行有非常大规模的部署,在某大银行的核心系统里面,占比超20%。

某农信ODS业务使用了多台浪潮AS5600G2,为前端8台POWER小型机组成的Oracle RAC提供存储服务。为联社统一数据平台服务提供有力支撑。

在某大型国有银行数据中心建设中,浪潮存储全面对接OpenStack、兼容多家云平台,在各种业务系统尤其是网络交易相关的业务中,得到了用户青睐,浪潮存储助力其将所有业务放到云上,成为最快实现云化三数据中心(3DC)的国有大型银行。

在PB级客户方面,浪潮存储的客户数量同比增长150%,重复购买、扩容超过40%。

孙磊还表示,采用全闪的集中式存储未来面向就是核心应用。

浪潮认为,未来在核心应用和核心产品中,闪存将占主导地位。而浪潮还将继续坚持创新,以全闪存储系统加速数字转型。

编辑:jq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    214

    文章

    31700

    浏览量

    224687
  • 数据
    +关注

    关注

    8

    文章

    7366

    浏览量

    95218
  • CT
    CT
    +关注

    关注

    2

    文章

    211

    浏览量

    35032
  • 自动驾驶
    +关注

    关注

    795

    文章

    15073

    浏览量

    182084

原文标题:浪潮存储:以全闪存储加速数字转型

文章出处:【微信号:Maxsun,微信公众号:铭瑄存储合作伙伴】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AI Ceph 分布式存储教程资料大模型学习资料2026

    在人工智能的浪潮中,算力、算法与数据被誉为驾马车。然而,随着大模型(LLM)参数量突破万亿级别,数据集规模膨胀至 PB 乃至 EB 级别,传统的
    发表于 05-01 17:35

    卫星数据管理:127GB单次过境数据,硬盘存储系统如何应对?

    在卫星数据管理全链路中——从信号捕获、解码分析到长期归档——存储系统虽处幕后,却是保障业务连续性的关键基础设施。一旦存储环节出现故障,整个数据处理链路将
    的头像 发表于 04-23 17:15 351次阅读
    卫星<b class='flag-5'>数据</b>管理:127GB单次过境<b class='flag-5'>数据</b>,硬盘<b class='flag-5'>存储</b>系统如何应对?

    算力爆发时代IP设计面临哪些新挑战

    生成式 AI、Chiplet、多Die 架构、具身智能……新一轮计算浪潮正在深刻改变芯片设计方式,也对底层 IP 技术提出了前所未有的挑战
    的头像 发表于 04-23 13:56 283次阅读

    海康存储亮相CFMS 2026 全场景解决方案赋能AI存储新生态

    3月27日,以“穿越周期 释放价值”为主题的CFMS|MemoryS 2026在深圳举行。本届峰会汇聚存储产业链上下游核心力量,旨在直面AI驱动存储革命的浪潮之下,行业所面临的技术迭代
    的头像 发表于 03-28 11:28 818次阅读
    海康<b class='flag-5'>存储</b>亮相CFMS 2026 全场景解决方案赋能AI<b class='flag-5'>存储</b>新生态

    场效应管选型指南:从技术演进到应用实践的全景解读

    一、行业背景:功率半导体面临挑战在智能化浪潮推动下,功率半导体元件正经历前所未有的技术变革。从新能源汽车的电驱系统到工业自动化设备的伺服控制,从消费电子的快充方案到
    的头像 发表于 03-07 18:06 577次阅读
    场效应管选型指南:从技术演进到应用实践的全景解读

    ReRAM:AI时代的潜力存储技术

    ,逐渐成为存储领域和人工智能(AI)领域的焦点。   ReRAM是一种非易失性存储器,由富士通率先研制成功。它基于忆阻器原理,采用金属 - 介质层 - 金属(MIM)的层结构,通过电阻状态的变化来
    的头像 发表于 02-25 09:04 5055次阅读

    先进封装时代,芯片测试面临哪些新挑战

    摩尔定律放缓后,2.5D/3D 封装、Chiplet 成行业新方向,却给测试工程师带来巨大挑战。核心难题包括:3D 堆叠导致芯粒 I/O 端口物理不可达,需采用 IEEE 1838 标准等内置测试
    的头像 发表于 02-05 10:41 727次阅读

    芯片可靠性面临哪些挑战

    芯片可靠性是一门研究芯片如何在规定的时间和环境条件下保持正常功能的科学。它关注的核心不是芯片能否工作,而是能在高温、高电压、持续运行等压力下稳定工作多久。随着晶体管尺寸进入纳米级别,芯片内部犹如一个承受着巨大电、热、机械应力考验的微观世界,其可靠性面临着原子尺度的根本性挑战
    的头像 发表于 01-20 15:32 712次阅读
    芯片可靠性<b class='flag-5'>面临</b>哪些<b class='flag-5'>挑战</b>

    【干货】必看!一文读懂NAS存储核心技术:RAID配置、跨平台兼容性、数据安全全解析

    数字化时代存储挑战在数字化时代数据存储和管理已成为企业和个人
    的头像 发表于 12-25 19:34 1995次阅读
    【干货】必看!一文读懂NAS<b class='flag-5'>存储</b>核心技术:RAID配置、跨平台兼容性、<b class='flag-5'>数据</b>安全全解析

    智微与开酷科技深圳发新品 引领智慧存储与毫米波感测新时代

    存储需求再次掀起浪潮,推动产业迈入新一轮超级周期。AI 虽已热门多年,但其影响仍不断深化,从数据量、算力到模型规模的持续提升,都促使相关产业结构不断演进。智微科技在发布会中从 AI 带来的产业变革谈起,深入分析 AI
    的头像 发表于 12-18 10:18 1234次阅读
    智微与开酷科技深圳发新品 引领智慧<b class='flag-5'>存储</b>与毫米波感测新<b class='flag-5'>时代</b>

    单盘容量360TB!这一新技术将改写数据中心存储格局?

    增加。而其中接近80%属于几乎不被频繁访问却需要长期保存的“冷数据”。作为存储这些数据的核心载体,数据中心在存储方案选择上,正
    的头像 发表于 12-18 08:18 5145次阅读

    亚太地区AI数据中心可持续发展面临重重挑战

    当Chat GPT每秒“吞吐”数万次请求、自动驾驶汽车毫秒级解析路况、AI大模型训练一口“吞”掉百万度电时,我们正亲历着一场由“算力浪潮”驱动的科技革命;与此同时,一个严峻的现实问题也浮出水面:强大的AI背后是对电力的极度渴求,算力增长与能源约束之间的矛盾已成为全球面临
    的头像 发表于 12-10 10:24 1423次阅读
    亚太地区AI<b class='flag-5'>数据</b>中心可持续发展<b class='flag-5'>面临</b>重重<b class='flag-5'>挑战</b>

    东方国信CirroData数据库与曙光存储FlashNexus完美兼容

    在科技自主化浪潮澎湃的今天,数据存储性能与数据安全成为核心挑战。日前,北京东方国信科技股份有限公司的CirroData分布式高性能
    的头像 发表于 08-29 10:17 1438次阅读

    FOPLP工艺面临挑战

    FOPLP 技术目前仍面临诸多挑战,包括:芯片偏移、面板翘曲、RDL工艺能力、配套设备和材料、市场应用等方面。
    的头像 发表于 07-21 10:19 1898次阅读
    FOPLP工艺<b class='flag-5'>面临</b>的<b class='flag-5'>挑战</b>

    AI 时代来袭,手机芯片面临哪些新挑战

    边缘AI、生成式AI(GenAI)以及下一代通信技术正为本已面临高性能与低功耗压力的手机带来更多计算负载。领先的智能手机厂商正努力应对本地化生成式AI、常规手机功能以及与云之间日益增长的数据传输需求
    的头像 发表于 06-10 08:34 1457次阅读
    AI <b class='flag-5'>时代</b>来袭,手机芯片<b class='flag-5'>面临</b>哪些新<b class='flag-5'>挑战</b>?