侵权投诉

完善资料让更多小伙伴认识你,还能领取20积分哦, 立即完善>

3天内不再提示

智算时代AI性能需求6年增长30万倍存储怎么办

inspurstorage 来源:浪潮存储 作者:叶毓睿 2021-11-26 14:52 次阅读

/作者:浪潮信息首席架构师 叶毓睿

智算时代的序幕已经拉开,互联的万物,一切皆计算。智慧计算融入到千行万业的图景,正在徐徐铺开。这是一个数据成为生产要素的时代,智慧计算将劳动者由人变成了人+AI,将数据变成了一种新的生产资料,将计算力驱动的信息化设备变成了生产工具。

智算时代,算力供应呈现多元化发展趋势,包括科学计算、关键计算、云计算、AI计算等,支持这些多元、异构的计算,需要新型数据中心。

工信部在《新型数据中心发展三年行动计划(2021-2023年)》对新型数据中心的定义是:以支撑经济社会数字转型、智能升级、融合创新为导向,以5G、工业互联网、云计算、人工智能等应用需求为牵引,汇聚多元数据资源、运用绿色低碳技术、具备安全可靠能力、提供高效算力服务、赋能千行百业应用的新型基础设施,具有高技术、高算力、高能效、高安全特征。并明确指出:引导新型数据中心集约化、高密化、智能化建设,加快高性能、智能计算中心部署。

先以AI计算为例。2018年5月,一篇著名的OpenAI博客分析,自 2012 年以来,AI算力需求总增长约30万倍(如下图),也即3.4月翻一倍(相比之下,摩尔定律约每两年翻倍,总增长约7倍)。

迅猛增长的AI算力需求,对底层IT基础设施,包括存储提出了新的挑战。

再以云计算为例。国内最大的云计算公司阿里云,在2020年的双11当天零点零分26秒,迎来流量洪峰,订单创建峰值达58.3万笔/秒(也即TPS,Transaction Per Second,代表每秒执行的事务数)。

相信这么高的性能需求,会对与之相关的电商、银行、物流等上下游的企业造成很大的压力。例如2017年双11,农业银行核心系统全天交易量4.49亿笔。其实,无论云计算,还是边缘计算等,都已经或将要和私有云或者数据中心的业务系统打通,实现数据的处理、流动和共享,为全产业链联动,提供及时交付和响应。另外,无论是AI计算、科学计算,还是万物互联带来的计算,都已经或将要实现从非结构化数据到结构化数据的转换,以及终端(含手机、车载大屏等)的可视化呈现,为个人或组织提供参考和决策依据;在这个过程中,转换后结构化数据的数据处理、安全,和再在线(类似从AI训练到推理),离不开为关键计算提供支撑的IT基础设施,如集中式存储。

当我们关注存储性能时,通常有IOPS(每秒IO个数)和延时(处理IO所需时间,通常以毫秒,也即ms为单位)两大指标。上面双11所述的TPS是每秒交易数,是从业务视角来观察性能的,通常一个订单的操作会联动多个数据库的增删改查操作,导致多个存储IO的读写操作。不过,需要注意的是,不同业务TPS带动的IO数有时相差很大。

我们再来看关键计算的几个例子。为了追求极致的性能,有些行业用户无所不用其极。

Spread Networks 大概从 2010 年开始,花费 3 亿美元挖通修建了一条横穿阿巴拉契亚山脉的光缆隧道,目的是让光缆不用绕道,将数据传输时间缩短大约3毫秒。

2013 年,一组破冰队伍和特制的极地冰山电缆铺设船将开始建造第一艘跨北极海底光缆。其中两条名为 “Artic Fibre”和 “Arctic Link” 的光缆将跨过加拿大北极群岛的西北通道。第三条类似走向的海底光缆,俄罗斯跨北极海底光缆(ROTACS)将会围绕北欧北部的斯堪的纳维亚半岛和俄罗斯进行铺设。通过这三条海底光缆,全球两大金融交易中心英国伦敦和日本东京将几乎得以直连,相比现有方案节省近8000公里,两地间的数据传输时间也从大约0.23秒减少至0.17秒,这项工程耗资大约15亿美元。

2017年彭博社报道,Jump Trading公司在芝加哥商品交易所数据中心对面,花了1400万美元买了一块12万平方米的空地(如下图),并架设了微波通信基站,仅仅为了节省0.07毫秒时间。众所周知,眨眼常被形容快,它的时间约0.4秒;而Jump Trading花费巨资,只是为了快5700分之一眨眼的时间。

可想而知,在一些行业的某些特定应用上,为了追求高性能、低延迟,用户愿意不惜代价。笔者曾服务过的一个国内部委用户,仅仅为了缩短几毫秒的延时,数年下来,已经投入了数亿元人民币在集中式存储上。

就像人类在奥运会上所展现的精神一样,追求更快、更高、更强是永恒不变的动力,存储性能竞赛也是如此。

2021年6月,全球存储性能委员会(Storage Performance Council,简称SPC)公布了新的SPC-1基准评测报告,浪潮分布式存储AS13000G5以630万IOPS(每秒读写操作的次数)、0.5ms时延的评测值,刷新了分布式存储性能全球最优成绩。这是继浪潮存储在“统一存储”赛道夺得16控、8控、单位成本性能世界冠军之后,在“分布式存储”领域实现新突破,成为存储全球性能领跑者。

2021年8月,SPC公布了最新SPC-1基准评测榜单,浪潮存储高端全闪HF18000G5获得2300万IOPS(每秒读写操作次数)、不超过0.3ms延时的评测值,位列性能总榜全球第一。

浪潮存储的优异性能表现,对智算时代中的科学计算、云计算、AI计算,如核心交易用到的数据库,以及OLAP、邮件系统、虚拟化、AI等业务的存储系统选型具有极高的参考价值。浪潮存储会在集中式全闪、分布式全闪新存储领域持续投入,以性能全面碾压、技术实力领先、市场增速领跑的强大产品和市场竞争力加速企业数字化转型,形成全球存储新势力。

编辑:jq

原文标题:智算时代AI性能需求6年增长30万倍,存储怎么办?

文章出处:【微信号:inspurstorage,微信公众号:浪潮存储】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    Protegrity携手谷歌云支持BigQuery远程功能

    数据安全领域的全球领导者Protegrity今天宣布,公司已与Google Cloud合作,共同支持....
    发表于 01-21 15:15 2次 阅读

    瑞为技术斩获“2021年度最佳人工智能公司TOP30”

    近日,备受业内瞩目的机器之心「AI中国」2021年度评选榜单正式揭晓。瑞为技术凭借深耕多年的图像感知....
    的头像 瑞为技术Reconova 发表于 01-21 14:14 177次 阅读

    数据中台是什么,它到底是什么意思

    关于数据中台,可能大家都有听到过,但是它到底是什么意思?可能很多人都比较迷糊,今天小编就来一一解答究....
    发表于 01-21 10:26 5次 阅读
    数据中台是什么,它到底是什么意思

    NVIDIA在线研讨会亮点前瞻

    DeepStream SDK 作为 IVA 智能视频分析工具集,为利用 AI 和机器视觉方法处理和分....
    的头像 NVIDIA英伟达企业解决方案 发表于 01-21 09:55 145次 阅读

    NVIDIA出席第十五届深圳国际金融科技博览会

    第十五届深圳国际金融科技博览会(“简称金博会”)在深圳会展中心1号馆举行。 众所周知,在金融行业,现....
    的头像 NVIDIA英伟达企业解决方案 发表于 01-21 09:31 340次 阅读

    利用智慧消防系统筑牢高校档案消防安全防线

    摘要:高校档案馆是高校历史记忆的重要保管机构,消防安全是高校档案工作的高压线。新形势下,高校档案的消....
    发表于 01-21 08:14 35次 阅读

    智慧校园安装人脸识别门禁的好处都有哪些

    校园这个场所的人员流动性较大,主要涉及对象为学生和学校教职工。而大部分学校是以视频监控的方式来预防保....
    发表于 01-20 17:36 7次 阅读

    24芯GJPFJH光缆应用在哪,它的特性有哪些

    GJPFJH光缆是一种单元式束状光缆,许多人都在问GJPFJH光缆有哪些特性
    发表于 01-20 16:51 4次 阅读

    易华录亮相第十六届中国智能交通年会

    第十六届中国智能交通年会(ITSAC 2021)暨2021中国智能交通大会在湖南长沙举行。本次活动由....
    的头像 易华录 发表于 01-20 16:35 254次 阅读

    易华录亮相第十六届中国IDC产业年度盛典

    第十六届中国IDC产业年度盛典在深圳举办,大会由中国IDC产业年度大典组委会主办,中国IDC圈、Cl....
    的头像 易华录 发表于 01-20 16:15 221次 阅读

    小区电梯智能识别阻车系统的简单介绍

    电动车禁入电梯,电梯智能识别阻车系统 如何科学有效地防止电动车进电梯?答案就是,通过基于人工智能技术....
    发表于 01-20 14:00 28次 阅读

    一清创新荣获“最佳自动驾驶园区商用奖”

    「雷锋网2021最佳AI数智化年度榜」评选活动成功举办,一清创新荣获“最佳自动驾驶园区商用奖”,一清....
    的头像 一清创新UDI 发表于 01-20 12:02 587次 阅读

    工业大数据加速融合AI向数据智能发展

    近期,由中国科学院《互联网周刊》、德本咨询、eNet研究院联合发布了“2021数字经济创新企业100....
    的头像 机智云物联网 发表于 01-20 10:58 369次 阅读

    如何建立真正的数据目录

    作者简介:王积杰目前担任IBM数据与AI产品线大中华区信息架构产品总监,对AI和信息架构有深刻的理解....
    的头像 IBM中国 发表于 01-20 10:22 178次 阅读

    2022年半导体行业十大发展趋势

    导语:随着光、温度、压力、磁场、电场等环境因素的变化,导电性会发生相当大的变化,这是半导体主要特性之....
    的头像 华秋商城 发表于 01-20 09:50 374次 阅读

    我国首次实现批量研制低轨宽带通信卫星

    电子发烧友网报道(文/李弯弯)近日,由银河航天自主研发的6颗低轨宽带通信卫星正式出厂,这是我国首次实....
    的头像 电子发烧友网 发表于 01-20 09:01 395次 阅读

    对话艾拉物联全球终端形象设计官 探寻划时代智慧空间2.0秘境

    Ayla Home,作为Ayla艾拉物联在实现“云边端”一体化基础上创建的智能家居品牌,旨在成为全球....
    发表于 01-19 17:26 15次 阅读
    对话艾拉物联全球终端形象设计官 探寻划时代智慧空间2.0秘境

    日产汽车将开展使用AI技术为电动汽车充电的实验

    电子发烧友网报道(文/李弯弯)据外媒报道,日产汽车1月12日宣布,公司将开展使用AI技术为电动汽车充....
    的头像 电子发烧友网 发表于 01-19 17:05 300次 阅读

    我国集成电路进出口逆差进一步扩大

    电子发烧友网报道(文/吴子鹏)前不久,工信部发布了《2021年1-11月份电子信息制造业运行情况》,....
    的头像 电子发烧友网 发表于 01-19 17:01 303次 阅读

    GJPFJH光缆是怎么制作的,它的特性是什么

    在品类繁杂的光缆中,单元式束状光缆随着时代的变化,科技的改变,随着光缆业的升级,光缆越来越多的使用,....
    发表于 01-19 16:23 8次 阅读

    AI+安防市场规模将超900亿,各细分场景迎新机

    当下,随着行业智能化发展加快,安防边界愈发模糊,AI场景化需求持续落地。AI+安防作为人工智能技术的....
    发表于 01-19 14:55 138次 阅读

    所托瑞安亮相2021第二届全球保险科技大会

    日前,由金融界、天津港保税区联合举办的2021第二届全球保险科技大会暨“燕梳奖”年度评选活动隆重召开....
    的头像 智能防撞所托瑞安 发表于 01-19 13:32 270次 阅读

    长电科技SCK荣获澜起科技 “2021年最佳供应商”奖

    2022年1月19日,中国上海 ---近日,全球领先的集成电路制造和技术服务提供商长电科技子公司星科....
    发表于 01-19 12:09 46次 阅读
    长电科技SCK荣获澜起科技 “2021年最佳供应商”奖

    小马智行与一汽(南京)达成战略合作

    在自动驾驶技术应用落地的关键领域,小马智行再迎重量级合作伙伴。小马智行宣布与战略投资方中国一汽的全资....
    的头像 Pony.ai小马智行 发表于 01-19 12:05 316次 阅读

    阿尔法蛋AI词典笔X10助力解决家长辅导难题

    “双减”政策推出,个性化教育时代来临,孩子如何培养?家长们也是绞尽脑汁,希望能为孩子在学习的道路上提....
    发表于 01-19 10:43 13次 阅读

    来也科技RPA+AI加速智能化

    在数字化、自动化、智能化等技术浪潮的推进下,众多企业纷纷开始考虑转型、升级。在此趋势下,中交第二航务....
    的头像 话说科技 发表于 01-19 09:22 317次 阅读

    巧思人工智能宫颈细胞学辅助筛查系统助力精准医疗

    在刚刚结束的广东省病理年会医学会病理学学术年会上,深思考作为深耕于“AI+医疗”领域的高新技术企业,....
    的头像 旷视MEGVII 发表于 01-19 08:47 498次 阅读

    耐能亮相第十八届中国国际社会公共安全博览会

    第十八届中国(深圳)国际社会公共安全博览会(以下简称“深圳安博会”)在深圳福田会展中心如火如荼的举行....
    的头像 Kneron耐能 发表于 01-18 17:46 361次 阅读

    16芯GJBFJV光缆的特点都有哪些

    分支室内光缆是光纤光缆的重要组成部分,广泛用于各种工业生产,对光缆质量的要求越来越高。
    发表于 01-18 16:42 10次 阅读

    英特尔启动AI百佳创新激励计划

    作为未来最重要的赋能技术,人工智能正在加速与各行各业融合,不断释放数字经济的实力。为了推动人工智能行....
    的头像 英特尔中国 发表于 01-18 15:27 412次 阅读

    日产开展AI技术研究,或让汽车充电跟加油一样快!

    电子发烧友网报道(文/李弯弯)据外媒报道,日产汽车1月12日宣布,公司将开展使用AI技术为电动汽车充....
    的头像 Carol Li 发表于 01-18 09:29 1353次 阅读
    日产开展AI技术研究,或让汽车充电跟加油一样快!

    2021的科技卦象·坎·全球缺芯洪水,中国造桥寻路

    过去一年里,全球缺芯焦虑,从汽车、电子消费等重点行业,演变成为一场覆盖上下游产业链、波及全球消费者的....
    的头像 脑极体 发表于 01-18 09:04 1632次 阅读

    电气防火安全用电运维管理系统和设备方案

    1、概述 安科瑞Acrelcloud-6000安全用电管理平台是针对我国当前电气火灾事故频发而创新的....
    发表于 01-17 21:49 8次 阅读
    电气防火安全用电运维管理系统和设备方案

    维智科技亮相WIM2021世界创新者年会

    由亿欧主办的「数字重塑世界」WIM2021 世界创新者年会在上海圆满落幕,并揭晓了年度重磅World....
    的头像 WAYZ维智 发表于 01-17 17:21 410次 阅读

    维智科技荣获“年度人工智能创新产品”大奖

    2021中国数字化年会启幕,维智“Phy-gital飞吉特时空智能平台” 凭借顶尖时空AI技术的落地....
    的头像 WAYZ维智 发表于 01-17 17:18 413次 阅读

    摩尔线程与同方计算机携手共同打造数智化算力底座

    近日,摩尔线程智能科技(北京)有限责任公司(简称:摩尔线程)与同方计算机有限公司(简称:同方计算机)....
    发表于 01-17 16:58 29次 阅读

    8芯GJBFJV分支光缆的特点是怎样的

    如今,光缆却是每天都在改变,一不留神会被时代抛弃。所以随着时代的发展,对这些光缆的认识也不会停止。
    发表于 01-17 16:36 10次 阅读

    AI芯片行业需求全面爆发 爱芯元智再获A++轮8亿元融资加速产业布局

     近日,AI视觉芯片研发及基础算力平台公司爱芯元智——宣布完成A++轮融资,该轮总金额为8亿元人民币....
    发表于 01-17 14:27 135次 阅读
    AI芯片行业需求全面爆发 爱芯元智再获A++轮8亿元融资加速产业布局

    基于ToF传感器的3D手势识别解决方案

    ‍‍‍‍‍‍‍‍手势识别是计算机科学和语言技术领域的一个研究课题,其目的是通过数学算法解析人类手势。....
    的头像 意法半导体中国 发表于 01-17 14:17 334次 阅读

    MAXIPILOT1.0智能巡航系统底层自研端到端解决方案

    全球出行产业变革蕴藏的巨大市场空间,归因于全人类对于交通出行的共性价值追求。
    的头像 智驾科技MAXIEYE 发表于 01-17 13:33 1200次 阅读

    智驾科技MAXIEYE加速推进自动驾驶逐级落地

    由铅笔道主办的2021•真榜——中国最具价值创新企业颁奖盛典在北京召开,会议宣布2021真榜获奖企业....
    的头像 智驾科技MAXIEYE 发表于 01-17 12:49 1281次 阅读

    云天励飞的隐私保护和信息安全能力已达到国际标准

    近日,云天励飞再次顺利通过国际权威认证机构BSI(British Standards Institu....
    的头像 云天励飞 发表于 01-17 12:25 263次 阅读

    云天励飞首次公布“开箱即用”SDC标准化产品

    第十八届安博会将于深圳会展中心(福田)隆重召开。云天励飞依然在1号馆1B11亮相,届时欢迎各位莅临现....
    的头像 云天励飞 发表于 01-17 12:21 271次 阅读

    云天励飞亮相全球(深圳)人工智能生态峰会

    全国人工智能创新应用大赛颁奖典礼暨全球(深圳)人工智能生态峰会在深举行。云天励飞董事长兼CEO陈宁博....
    的头像 云天励飞 发表于 01-17 12:15 443次 阅读

    云天励飞“1+1+N”自进化城市智能体战略

    第十八届中国国际社会公共安全博览会(简称“安博会”)在深圳会展中心顺利盛大举行。
    的头像 云天励飞 发表于 01-17 12:10 287次 阅读

    云天励飞构建自进化城市智能体

    由中国通信学会主办的2021(第四届)公共安全信息通信论坛在安博会期间举办,云天励飞董事长兼CEO陈....
    的头像 云天励飞 发表于 01-17 11:59 443次 阅读

    奥拓电子:构建智慧城市,打造智慧社区

    第十八届中国国际社会公共安全博览会在深圳福田会展中心隆重举行。奥拓电子围绕“构建智慧城市,打造智慧社....
    的头像 AOTO奥拓 发表于 01-17 11:33 558次 阅读

    服务器为什么这么贵,其成本体现在了哪些地方

    服务器为什么这么贵?成本体现在哪些地方? IDC服务商的成本支出源头主要由七大版块组成:①机柜/服务....
    发表于 01-17 11:18 21次 阅读

    AI视频智能分析在明橱亮灶/冷库智慧监管的应用

    根据国家市场监管总局政策文件,各地冷链进口集中监管仓,入仓查验区、核酸采样、消毒、装卸货等关键点安装....
    发表于 01-17 09:49 1544次 阅读
    AI视频智能分析在明橱亮灶/冷库智慧监管的应用

    萌新求助,求大佬分享关于云计算发展历程的知识点

    萌新求助,求大佬分享关于云计算发展历程的知识点...
    发表于 10-28 08:40 0次 阅读

    关于云计算的知识都总结在这里了

    云计算是什么?云计算的优势有哪些?云计算与物联网有何关系?...
    发表于 10-22 09:28 101次 阅读

    大数据与云计算之间有何关系

    大数据与云计算之间有何关系?
    发表于 10-09 06:06 101次 阅读

    一种新型云计算机设备的制作方法

    本实用新型涉及云计算机设备技术领域,具体为一种新型云计算机设备。背景技术:云计算是基于互联网的相关服务的增加、使用和交互...
    发表于 09-02 07:19 101次 阅读

    云计算和生命科学有什么关系?

    云计算和生命科学有什么关系? 基因测序领域中的IT挑战是什么? ...
    发表于 08-30 06:40 101次 阅读

    云计算与虚拟化技术发展编年史 精选资料分享

    目录文章目录目录虚拟化的发展进程硬件仿真虚拟化完全虚拟化半虚拟化操作系统虚拟化虚拟化的发展进程1959 年,克里斯托弗(Chri...
    发表于 07-28 07:17 101次 阅读

    这就是2020:全球云计算十一大年度话题盘点 精选资料分享

    每一 年 啊,都需要捋一下,总结总结,砥砺奋进再出发。2020,这一年,更值得回头看看……不过,要看懂某一年的云计算发展情况,...
    发表于 07-23 09:35 101次 阅读

    什么是云计算?其原理是什么?

    接下来这几篇将给大家介绍KVM的相关知识,讲到KVM之前我们先了解一下云计算,这也是自己在网上找的一些知识总结。给大家参...
    发表于 07-07 06:47 202次 阅读

    云计算原理及应用技术

    1、云计算概述  云计算:对一般用户而言,云计算是指通过网络以按需、易扩展的方式获得所需的服务。即随时随地只要能上网就能使...
    发表于 07-07 06:08 101次 阅读

    云计算原理与技术 相关资料推荐

    一、云计算是什么? 对一般用户而言:云计算是指通过网络以按需、易扩展的方式获得所需的服务。即随时随地只要能上网就能使用...
    发表于 07-06 07:54 101次 阅读