0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

浪潮信息如何应对智能时代下的数据存储需求

浪潮存储 来源:浪潮存储 2024-11-26 13:42 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着智能时代的全面到来,数据量呈现出爆炸性增长,这对存储系统提出了前所未有的高标准要求。从早期的“百模大战”演进至“千模大战”,现已迈入了一个以数据为核心的新时代,其中数据成为了算法与算力不可或缺的基础支撑。

在近期举行的2024中国数据与存储峰会上,分布式存储产品部总经理姜乐果发表了题为《智能时代的数据存储平台》的主题演讲。在演讲中,姜乐果深刻剖析了智能时代背景下数据存储所面临的挑战及浪潮信息为应对这些挑战所做出的不懈努力与创新实践。

智能时代下的数据存储需求

无论是金融领域的风险精准识别、智慧交通中的自动驾驶技术、制造业中的精密质量检测,还是科研领域的高效计算探索,都深深依赖于海量数据的强大支持。然而,数据的迅猛增长也给存储系统带来了诸多前所未有的严峻挑战,这些挑战涵盖了更高的性能需求、更灵活的扩展能力,以及更智能化的管理机制等多个方面。

人工智能时代,数据作为最为关键的载体,其计算过程中的存储环节面临着性能、效率和韧性这三大核心挑战。

姜乐果在演讲中着重指出,数据存储的性能已经成为制约众多应用场景进一步发展的关键因素之一。相较于以往,大模型的训练对存储性能的需求已经跃升了多个数量级。在传统时代,存储性能往往停留在百GB级的水平,而到了大模型训练的时代,这一需求已经激增到TB级。这意味着,如果没有足够快速的存储设备作为支撑,数据的读写时间将会大幅度延长,进而导致GPU等昂贵且宝贵的计算资源处于闲置状态,造成资源的极大浪费。

除了性能之外,数据存储的效率也是至关重要的。在当今这个数据多源异构的时代,数据来源于网络、云端以及政府机构等多个渠道,如何迅速有效地对这些数据进行清洗、整合,并最终形成有价值的数据资源,成为了一个亟待解决的难题。

此外,从国家政策的角度来看,数据要素已经被正式纳入资产负债表,成为了企业资产中不可或缺的一部分。这一举措不仅彰显了数据的巨大价值,同时也对存储系统的安全性与可靠性提出了更为严格的要求,以确保数据的完整性和保密性。

浪潮信息的创新探索与实践

面对智能时代的种种挑战,浪潮信息已经形成了清晰的存储平台构建策略。

在产品布局上,浪潮信息针对大模型训练推出了软件定义存储,它融合了块、文件、对象和大数据等多种存储类型,注重提供极致的性能和容量,并能够同时管理上层业务应用和第三方存储资源。而对于推理场景,浪潮信息则推出了阵列存储,利用传统盘阵的微秒级延时优势,能够迅速响应如人工智能驾驶等高要求场景的需求。此外,浪潮信息还自主研发了SSD,通过打通IO路径,进一步提升了存储效率。

为了提升性能,浪潮信息采用了端到端的优化策略。结合SSD和技术架构的演进,通过智能运行、缓存和自解锁等技术,对软件架构进行了重构。这使得小文件性能提升了5倍以上,大文件性能提升了10倍。在训练过程中,CheckPoint操作实现了秒级读写,TB级带宽的案例有效减少了GPU时延的浪费,从而提升了训练效率。

在智能空间管理方面,浪潮信息去除了本地文件系统,直接管理裸盘,并预分配空间和权限到计算节点。这种方式减少了原数据的访问,使得空间利用率达到了95%以上,同时性能没有衰减,进一步缩短了大模型训练的时间。

融合存储优化管理:浪潮信息软件定义存储从2016年自研至今不断发展,通过和客户业务深度结合的方式,推动产品从文件、对象融合逐步向四合一、五合一迈进。到目前,存储对内可以实现多协议互访互通、语义无损,同时只需要保存一份数据供多种协议访问;存储对外可通过全局文件系统支持数据跨介质、跨终端、跨域流动,实现一套存储管理所有平台,优化存储效率。

安全可靠保障业务:数据资产入表对安全性和可靠性要求高,浪潮信息在风险防控上检测率高、误报漏报率低,达到万分之2.9。利用AIOps功能预测性能、容量趋势和故障盘,提前预警处理,减少盘体故障导致的存储宕机。

在全球存储市场中,浪潮信息存储装机容量位居前三,企业存储业务在中国位居第二,全闪存储销售额同样在中国市场占据领先地位。随着大数据、云计算、人工智能等技术的快速发展,数据存储需求日益多样化且复杂化。基于此,浪潮信息凭借深厚的技术研发底蕴,积极推动场景共同体建设,与合作伙伴共同探索解决方案、定制产品,并协同拓展市场,共同推动存储领域的进步。展望未来,浪潮信息将不断致力于提供更加优质、高效、安全的存储解决方案,以应对市场对高效、可靠存储的迫切需求,为各行各业的数字化转型和智能化升级提供坚实支撑。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • gpu
    gpu
    +关注

    关注

    28

    文章

    5339

    浏览量

    136292
  • 数据存储
    +关注

    关注

    5

    文章

    1040

    浏览量

    53054
  • 浪潮
    +关注

    关注

    1

    文章

    491

    浏览量

    25515

原文标题:智能时代的存储挑战与机遇:浪潮信息的创新探索与实践

文章出处:【微信号:inspurstorage,微信公众号:浪潮存储】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AI Ceph 分布式存储教程资料大模型学习资料2026

    在人工智能浪潮中,算力、算法与数据被誉为三驾马车。然而,随着大模型(LLM)参数量突破万亿级别,数据集规模膨胀至 PB 乃至 EB 级别,传统的
    发表于 05-01 17:35

    九天菜菜大模型agent智能体开发实战2026一月班

    和长期记忆,短期记忆存储即时信息,长期记忆沉淀持久知识,通过向量数据库等技术实现高效存储与检索,为 Agent 的决策提供有力支持。规划模块赋予 Agent“谋定而后动”的智慧,它运用
    发表于 04-15 16:04

    浪潮信息直播发布业界首个企业级OpenClaw方案“企千虾”

    月2日,浪潮信息直播发布业界首个企业级OpenClaw方案——「企千虾」,为企业规模化部署、管理和应用OpenClaw,打造了安全、高效、易用的全链路方案。实操演示了「企千虾」基于元脑服务器实现
    的头像 发表于 04-05 17:44 2201次阅读

    野外数据采集系统中的稳定存储:CS 创世 SD NAND 应用分析

    与CS创世工业级SD NAND存储芯片(CSNP4GCR01-DPW)构建的户外信息采集器解决方案,旨在为严苛环境的长期数据监测任务,提供一个稳定可靠、能效卓越的
    发表于 03-20 18:17

    新四化浪潮智能汽车的 “数字大动脉” 该如何搭建?

    前言在智能化、电动化、网联化、共享化的行业浪潮,汽车正在完成从传统机械产品向新一代移动智能终端的彻底进化。在软件定义汽车(SDV)的全新时代
    的头像 发表于 03-18 10:39 800次阅读
    新四化<b class='flag-5'>浪潮</b><b class='flag-5'>下</b>,<b class='flag-5'>智能</b>汽车的 “数字大动脉” 该如何搭建?

    ReRAM:AI时代的潜力存储技术

    电子发烧友网报道(文/李弯弯)在当今科技飞速发展的时代存储技术作为信息社会的基石,不断推动着各个领域的创新与变革。其中,ReRAM(阻变存储器,即电阻式随机存取
    的头像 发表于 02-25 09:04 5055次阅读

    人工智能时代的精密脉搏

    当今时代,全球工业格局在科技浪潮的持续涤荡加速重塑,工业革命作为重塑进程中的关键“催化剂”,已然历经数次迭代。聚焦于数据中心领域,自OpenAI发布后,AI
    的头像 发表于 01-19 09:12 653次阅读
    人工<b class='flag-5'>智能</b><b class='flag-5'>时代</b>的精密脉搏

    曙光存储超级隧道技术助力应对PCIe 6.0时代

    8月29日,聚焦“智存·智算·智能”的第二届CCF中国存储大会在武汉隆重召开。会上,曙光存储副总裁郭照斌宣布,“超级隧道”技术能更好的应对PCIe 6.0
    的头像 发表于 09-03 14:01 744次阅读

    霄云科技银河存储:重构AI时代存储新范式

    在人工智能与高性能计算需求呈指数级增长的今天,数据存储的效率与可靠性已成为算力释放的关键支撑。上海霄云信息科技有限公司正式推出全新一代AI
    的头像 发表于 08-21 10:36 1162次阅读
    霄云科技银河<b class='flag-5'>存储</b>:重构AI<b class='flag-5'>时代</b>的<b class='flag-5'>存储</b>新范式

    AI 芯片浪潮,职场晋升新契机?

    在科技飞速发展的当下,AI 芯片已然成为众多行业变革的核心驱动力。从互联网巨头的数据中心,到我们日常使用的智能手机、智能家居设备,AI 芯片的身影无处不在,深刻改变着产品形态与服务模式。而对于身处
    发表于 08-19 08:58

    AI 边缘计算网关:开启智能时代的钥匙​—龙兴物联

    在数字化浪潮的当下,AI 边缘计算网关正逐渐崭露头角,成为众多行业转型升级的关键力量。它宛如一座智能桥梁,一端紧密连接着各类物理设备,如传感器、摄像头、工业机器等,负责收集丰富的数据信息
    发表于 08-09 16:40

    浪潮信息发布&quot;元脑SD200&quot;超节点,面向万亿参数大模型创新设计

    北京2025年8月8日 /美通社/ -- 8月7日,浪潮信息发布面向万亿参数大模型的超节点AI服务器"元脑SD200"。该产品基于浪潮信息创新研发的多主机低延迟内存语义通信架构,以开放系统设计向上
    的头像 发表于 08-08 22:17 842次阅读
    <b class='flag-5'>浪潮信息</b>发布&quot;元脑SD200&quot;超节点,面向万亿参数大模型创新设计

    CCF 信息存储技术专委会走进江波龙中山存储产业园,共探 AI 时代存储创新

    2025年6月28日,中国计算机学会(CCF)信息存储技术专业委员会走进江波龙中山存储产业园,开展“AI时代存储技术创新机遇”主题研讨会,
    的头像 发表于 06-30 18:55 1219次阅读
    CCF <b class='flag-5'>信息</b><b class='flag-5'>存储</b>技术专委会走进江波龙中山<b class='flag-5'>存储</b>产业园,共探 AI <b class='flag-5'>时代</b><b class='flag-5'>存储</b>创新

    飞利信与浪潮信息达成战略合作

    近日,2025年浪潮信息北京ISP战略伙伴签约授牌仪式成功举办。浪潮信息与北京飞利信电子技术有限公司等22家战略合作伙伴达成签约,其中将面向北京人工智能应用大市场,在产品技术共创、行业场景深化及区域
    的头像 发表于 06-24 17:37 1328次阅读

    SS12A1T汽车连接器现货供应,助力汽车电气化升级

    SS12A1T是安费诺(Amphenol)生产制造的汽车连接器。Amphenol作为业内知名品牌,其产品向来以卓越的可靠性与稳定性著称,能够轻松应对汽车电路严苛的连接要求。在汽车电气化与智能浪潮
    发表于 06-03 10:34