0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

智算时代AI性能需求6年增长30万倍存储怎么办

浪潮存储 来源:浪潮存储 作者:叶毓睿 2021-11-26 14:52 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

/作者:浪潮信息首席架构师 叶毓睿

智算时代的序幕已经拉开,互联的万物,一切皆计算。智慧计算融入到千行万业的图景,正在徐徐铺开。这是一个数据成为生产要素的时代,智慧计算将劳动者由人变成了人+AI,将数据变成了一种新的生产资料,将计算力驱动的信息化设备变成了生产工具。

智算时代,算力供应呈现多元化发展趋势,包括科学计算、关键计算、云计算、AI计算等,支持这些多元、异构的计算,需要新型数据中心

工信部在《新型数据中心发展三年行动计划(2021-2023年)》对新型数据中心的定义是:以支撑经济社会数字转型、智能升级、融合创新为导向,以5G、工业互联网、云计算、人工智能等应用需求为牵引,汇聚多元数据资源、运用绿色低碳技术、具备安全可靠能力、提供高效算力服务、赋能千行百业应用的新型基础设施,具有高技术、高算力、高能效、高安全特征。并明确指出:引导新型数据中心集约化、高密化、智能化建设,加快高性能、智能计算中心部署。

先以AI计算为例。2018年5月,一篇著名的OpenAI博客分析,自 2012 年以来,AI算力需求总增长约30万倍(如下图),也即3.4月翻一倍(相比之下,摩尔定律约每两年翻倍,总增长约7倍)。

迅猛增长的AI算力需求,对底层IT基础设施,包括存储提出了新的挑战。

再以云计算为例。国内最大的云计算公司阿里云,在2020年的双11当天零点零分26秒,迎来流量洪峰,订单创建峰值达58.3万笔/秒(也即TPS,Transaction Per Second,代表每秒执行的事务数)。

相信这么高的性能需求,会对与之相关的电商、银行、物流等上下游的企业造成很大的压力。例如2017年双11,农业银行核心系统全天交易量4.49亿笔。其实,无论云计算,还是边缘计算等,都已经或将要和私有云或者数据中心的业务系统打通,实现数据的处理、流动和共享,为全产业链联动,提供及时交付和响应。另外,无论是AI计算、科学计算,还是万物互联带来的计算,都已经或将要实现从非结构化数据到结构化数据的转换,以及终端(含手机、车载大屏等)的可视化呈现,为个人或组织提供参考和决策依据;在这个过程中,转换后结构化数据的数据处理、安全,和再在线(类似从AI训练到推理),离不开为关键计算提供支撑的IT基础设施,如集中式存储。

当我们关注存储性能时,通常有IOPS(每秒IO个数)和延时(处理IO所需时间,通常以毫秒,也即ms为单位)两大指标。上面双11所述的TPS是每秒交易数,是从业务视角来观察性能的,通常一个订单的操作会联动多个数据库的增删改查操作,导致多个存储IO的读写操作。不过,需要注意的是,不同业务TPS带动的IO数有时相差很大。

我们再来看关键计算的几个例子。为了追求极致的性能,有些行业用户无所不用其极。

Spread Networks 大概从 2010 年开始,花费 3 亿美元挖通修建了一条横穿阿巴拉契亚山脉的光缆隧道,目的是让光缆不用绕道,将数据传输时间缩短大约3毫秒。

2013 年,一组破冰队伍和特制的极地冰山电缆铺设船将开始建造第一艘跨北极海底光缆。其中两条名为 “Artic Fibre”和 “Arctic Link” 的光缆将跨过加拿大北极群岛的西北通道。第三条类似走向的海底光缆,俄罗斯跨北极海底光缆(ROTACS)将会围绕北欧北部的斯堪的纳维亚半岛和俄罗斯进行铺设。通过这三条海底光缆,全球两大金融交易中心英国伦敦和日本东京将几乎得以直连,相比现有方案节省近8000公里,两地间的数据传输时间也从大约0.23秒减少至0.17秒,这项工程耗资大约15亿美元。

2017年彭博社报道,Jump Trading公司在芝加哥商品交易所数据中心对面,花了1400万美元买了一块12万平方米的空地(如下图),并架设了微波通信基站,仅仅为了节省0.07毫秒时间。众所周知,眨眼常被形容快,它的时间约0.4秒;而Jump Trading花费巨资,只是为了快5700分之一眨眼的时间。

可想而知,在一些行业的某些特定应用上,为了追求高性能、低延迟,用户愿意不惜代价。笔者曾服务过的一个国内部委用户,仅仅为了缩短几毫秒的延时,数年下来,已经投入了数亿元人民币在集中式存储上。

就像人类在奥运会上所展现的精神一样,追求更快、更高、更强是永恒不变的动力,存储性能竞赛也是如此。

2021年6月,全球存储性能委员会(Storage Performance Council,简称SPC)公布了新的SPC-1基准评测报告,浪潮分布式存储AS13000G5以630万IOPS(每秒读写操作的次数)、0.5ms时延的评测值,刷新了分布式存储性能全球最优成绩。这是继浪潮存储在“统一存储”赛道夺得16控、8控、单位成本性能世界冠军之后,在“分布式存储”领域实现新突破,成为存储全球性能领跑者。

2021年8月,SPC公布了最新SPC-1基准评测榜单,浪潮存储高端全闪HF18000G5获得2300万IOPS(每秒读写操作次数)、不超过0.3ms延时的评测值,位列性能总榜全球第一。

浪潮存储的优异性能表现,对智算时代中的科学计算、云计算、AI计算,如核心交易用到的数据库,以及OLAP、邮件系统、虚拟化、AI等业务的存储系统选型具有极高的参考价值。浪潮存储会在集中式全闪、分布式全闪新存储领域持续投入,以性能全面碾压、技术实力领先、市场增速领跑的强大产品和市场竞争力加速企业数字化转型,形成全球存储新势力。

编辑:jq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 云计算
    +关注

    关注

    39

    文章

    8003

    浏览量

    143043
  • AI
    AI
    +关注

    关注

    89

    文章

    38085

    浏览量

    296338
  • 光缆
    +关注

    关注

    2

    文章

    838

    浏览量

    34854
  • TPS
    TPS
    +关注

    关注

    0

    文章

    83

    浏览量

    37342

原文标题:智算时代AI性能需求6年增长30万倍,存储怎么办?

文章出处:【微信号:inspurstorage,微信公众号:浪潮存储】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    AI赋能6G与卫星通信:开启智能天网新时代

    需求?传统网络会因流量激增而拥堵,而AI赋能的6G网络则能提前预测流量模式,动态调整资源分配。 AI算法能够实时分析海量数据,包括用户位置、网络负载、历史流量模式等。在2025
    发表于 10-11 16:01

    霄云科技银河存储:重构AI时代存储新范式

    在人工智能与高性能计算需求呈指数级增长的今天,数据存储的效率与可靠性已成为力释放的关键支撑。上海霄云信息科技有限公司正式推出全新一代
    的头像 发表于 08-21 10:36 734次阅读
    霄云科技银河<b class='flag-5'>存储</b>:重构<b class='flag-5'>AI</b><b class='flag-5'>时代</b>的<b class='flag-5'>存储</b>新范式

    睿海光电800G光模块助力全球AI基建升级

    巨头反馈,睿海光电在800G SR8订单中较竞品提前72小时完成交付,助力其AI训练集群建设周期压缩15%。 三、广泛兼容性:全场景适配+3超长质保,打造无忧部署体验 为应对客户多元化需求,睿海光电
    发表于 08-13 19:05

    睿海光电领航AI光模块:超快交付与全场景兼容赋能智时代——以创新实力助力全球客户构建高效力底座

    到全场景兼容,从800G量产突破到1.6T前瞻布局,睿海光电始终以客户需求为导向,以技术创新为引擎,为全球AI基础设施建设提供坚实底座。凭借智能制造实力与开放生态策略,睿海光电正携手合作伙伴,共同推动智能时代
    发表于 08-13 19:03

    适用于数据中心和AI时代的800G网络

    随着人工智能(AI)技术的迅猛发展,数据中心面临着前所未有的计算和网络压力。从大语言模型(LLM)训练到生成式AI应用,海量数据处理需求推动了网络带宽的快速增长。在此背景下,800G网
    发表于 03-25 17:35

    DeepSeek推动AI需求:800G光模块的关键作用

    性能方面展现了出色的优势,满足当前AI需求的快速增长。 高可靠性: 光模块经过温度、静电放电及机械耐久性等严格测试,确保在数据中
    发表于 03-25 12:00

    存力接棒力,慧荣科技以主控技术突破AI存储极限

    电子发烧友网报道(文/黄山明)在AI的高速增长下,尤其是以DeepSeek为代表的AI大模型推动存储需求激增,
    的头像 发表于 03-19 01:29 2337次阅读
    存力接棒<b class='flag-5'>算</b>力,慧荣科技以主控技术突破<b class='flag-5'>AI</b><b class='flag-5'>存储</b>极限

    千卡力破局:科通技术以&quot;AI大模型+AI芯片&quot;重构智底座

    2025,随着DeepSeek大模型的开源迭代,AI技术在云计算领域的应用加速渗透,市场对高性能AI芯片的需求迎来爆发式
    的头像 发表于 03-17 11:14 705次阅读

    FPGA+AI王炸组合如何重塑未来世界:看看DeepSeek东方神秘力量如何预测......

    ...... 2) AI革命:FPGA集群功耗比GPU降低62%;混合精度计算效率提升5.8...... 3) 6G通信突破:软件无线电实现Sub-
    发表于 03-03 11:21

    信而泰CCL仿真:解锁AI力极限,智中心网络性能跃升之道

    引言 随着AI大模型训练和推理需求的爆发式增长,智中心网络的高效性与稳定性成为决定AI产业发展的核心要素。信而泰凭借自主研发的 CCL(集
    的头像 发表于 02-24 17:34 978次阅读
    信而泰CCL仿真:解锁<b class='flag-5'>AI</b><b class='flag-5'>算</b>力极限,智<b class='flag-5'>算</b>中心网络<b class='flag-5'>性能</b>跃升之道

    英特尔至强6助力HPE Gen12,AI推理性能提升3

    在这个AI人工智能、HPC高性能计算飞速发展的时代,人们对于力的渴望是空前的,无论是CPU处理器、GPU/NPU加速器,尤其是生成式AI
    的头像 发表于 02-18 14:18 529次阅读
    英特尔至强<b class='flag-5'>6</b>助力HPE Gen12,<b class='flag-5'>AI</b>推理<b class='flag-5'>性能</b>提升3<b class='flag-5'>倍</b>!

    AI将推动未来三存储需求翻倍

    近期,一项由希捷委托Recon Analytics进行的全球调查显示,人工智能(AI)的广泛应用将在未来几年内引发数据生成的爆炸性增长。这一趋势对存储需求产生了巨大影响,特别是当现有的
    的头像 发表于 01-23 14:42 830次阅读

    AI驱动光模块上市公司业绩飙涨!新易盛净利涨3

    均增速近 30%。据赛迪顾问的数据显示,截至2024上半年,国内已经建设和正在建设的智中心超过250个,2024上半年智中心招投标相
    的头像 发表于 01-23 00:12 6891次阅读
    <b class='flag-5'>AI</b>智<b class='flag-5'>算</b>驱动光模块上市公司业绩飙涨!新易盛净利涨3<b class='flag-5'>倍</b>

    德明利DDR5内存助力AI PC时代存储性能与市场增长

    2024作为AIPC元年伴随异构力(CPU+GPU+NPU)需求高涨及新处理器平台推出DDR5内存以高速率、大容量低延迟与高带宽有效满足高性能
    的头像 发表于 01-21 16:34 2255次阅读
    德明利DDR5内存助力<b class='flag-5'>AI</b> PC<b class='flag-5'>时代</b><b class='flag-5'>存储</b><b class='flag-5'>性能</b>与市场<b class='flag-5'>增长</b>

    浪潮信息剖析智能时代数据存储领域面临的挑战与机遇

    在当今数字化时代力与存力的协同增长已成为驱动各行各业发展的关键力量。特别是在人工智能(AI)这一前沿领域,随着数据量的爆炸式增长,对
    的头像 发表于 12-30 09:43 1191次阅读