0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

中科驭数分享DPU在AI大模型时代下面临的机遇

驭数科技 来源:驭数科技 2023-05-08 09:21 次阅读

“云擎未来,智信天下”——2023移动云大会正式举办,中科驭数正式加入“移动云信息技术融合应用创新产业生态联合体”,创始人、CEO鄢贵海应邀在“磐石算力底座”论坛圆桌对话发言,分享DPU在AI大模型时代下面临的机遇。 中国移动副总经理赵大春在“磐石算力底座论坛”致辞中表示,算力作为云的基石,既是数字经济发展的重要基础,也是科技竞争的新焦点。在技术和行业的双重驱动下,未来的算力发展将呈现出三个方面的特点,使得算力将变成像水、电一样随取随用的社会级服务。一是算力多样化需求呈指数级增长。二是算力泛在化和融合化服务需求日益增强。三是算网内生安全体系亟需构建。

DPU将成为支撑高性能计算和人工智能的基石

本论坛圆桌对话讨论了AI大模型时代下高性能计算和存储系统所面临的挑战和机遇。中科驭数创始人、CEO鄢贵海提出ChatGPT将为底层芯片或算力基础设施的厂商带来巨大机会,并且预计DPU将成为支持高性能计算和人工智能的基石。DPU拥有低时延、高吞吐、以及强大的网络功能,这将促进下一代高性能计算实现规模化和分布式化,有望成为未来大型算力基础设施的核心组件。 从系统的角度看,如何解决ChatGPT应用带来的大算力问题,可以分为两个层次。首先,需要提高单颗芯片的性能,这方面业界已经提出了各种方法论。其次,需要打通各种基础设施,将局部算力连成网,解决网络端产生的各种瓶颈,以满足未来万亿级参数大模型的算力要求。这是当前的难点,也是DPU备受关注的原因。 作为数据专用处理器,DPU主要承担网络、存储、计算和安全等基础设施层应用服务,是提升算力服务、提高计算、网络和存储服务的关键。这使得DPU在大型语言模型中扮演着重要角色,特别是在数据交换和通信方面。

鄢贵海表示,无论是CPUGPU还是DPU,都需要基于上层应用需求来实现芯片结构,这样底层基础设施层资源才能够更高效地释放。在这种情况下,中国移动是一个非常好的集成平台,拥有庞大的用户数量、先进的应用和丰富的场景,不同厂商可以通过中国移动这一平台将原本不同的技术打磨到一个体系中,共同打造自主可控的算力基础设施。 中国移动云能力中心刘军卫也在论坛主题演讲中分享到,中国移动将助力打造国家级自主可控的高性能算力基础设施,通过布局国产化智算生态、共建自主GPU+DPU产业联盟、联创高性能网络技术三大举措,带动国产化智算产业成熟发展,抓住云计算技术定义权,引领云计算市场下一个黄金十年。到2024年,打通DPU、GPU、HPN三大单元,面向大模型场景打造一套全栈自主可控的系统。

中科驭数正式加入“移动云信息技术融合应用创新产业生态联合体”

大会期间,由工信部推动的“移动云信息技术融合应用创新产业生态联合体”(简称“联合体”)正式发布,旨在携手移动产业链上下游企业、高校、科研院所等相关创新单位,积极开展适配验证,标准研究、技术培训、解决方案孵化、创新成果推广和人才教育培训等关键合作。

中科驭数作为国内DPU领军企业,正式加入“移动云信息技术融合应用创新产业生态联合体”,将与各成员单位凝聚合力,推动信息技术应用创新解决方案和产业项目落地,共同构建开放包容、合作共赢的产业生态。

编辑:黄飞

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 处理器
    +关注

    关注

    68

    文章

    18275

    浏览量

    222157
  • 云计算
    +关注

    关注

    38

    文章

    7347

    浏览量

    135714
  • AI
    AI
    +关注

    关注

    87

    文章

    26443

    浏览量

    264044
  • DPU
    DPU
    +关注

    关注

    0

    文章

    294

    浏览量

    23966
  • 中科驭数
    +关注

    关注

    0

    文章

    88

    浏览量

    3892

原文标题:中科驭数应邀出席2023移动云大会,以DPU助力云计算发展

文章出处:【微信号:yusurtech,微信公众号:驭数科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    DPU技术赋能下一代AI算力基础设施

    4月19日,在以“重构世界 奔赴未来”为主题的2024中国生成式AI大会上,中科驭数作为DPU新型算力基础设施代表,受邀出席了中国智算中心创新论坛,发表了题为《以网络为中心的AI算力底
    的头像 发表于 04-20 11:31 383次阅读

    明天线上见!DPU构建高性能云算力底座——DPU技术开放日最新议程公布!

    算力,是数字经济时代的新质生产力。随着人工智能、智算中心建设等需求不断拓展,DPU在各行各业数据中心的应用逐步深入。异构算力代表DPU在新质生产力建设中,能否给出别开生面的答案,应战算力难题?
    的头像 发表于 04-03 18:12 720次阅读

    AI时代怎么样不被淘汰?讯飞AI鼠标助力你在AI时代成长

    功能的智能鼠标,将成为你跻身AI时代的利器。 下面来聊聊讯飞AI鼠标都有哪些令人惊艳的AI功能吧 1.星火认知大
    的头像 发表于 03-23 11:41 394次阅读
    <b class='flag-5'>AI</b><b class='flag-5'>时代</b>怎么样不被淘汰?讯飞<b class='flag-5'>AI</b>鼠标助力你在<b class='flag-5'>AI</b><b class='flag-5'>时代</b>成长

    中科驭数自研第二代DPU芯片K2获得行业认可

    近日,中科驭数自研第二代DPU芯片K2在众多云生态创新应用技术产品中脱颖而出,成功入选由中国云产业联盟暨中关村云计算产业联盟发布的“2023年中国云生态创新应用技术产品”。这一殊荣既是对中科驭数第二代
    的头像 发表于 01-18 09:20 534次阅读

    模型时代AI芯片面临的三大挑战

    AI算力需求的提升给中国本土芯片厂商的发展提供了较大的空间,带来新的机遇。IDC预计,2023年中国人工智能芯片出货量将达到133.5万片,同比增长 22.5%。
    发表于 12-14 10:15 430次阅读
    大<b class='flag-5'>模型</b><b class='flag-5'>时代</b>,<b class='flag-5'>AI</b>芯片<b class='flag-5'>面临</b>的三大挑战

    什么是DPU

    中心的加速计算模型的第三个计算单元。NVIDIA首席执行官黄仁勋本月早些时候的一次演讲中表示:“它将成为未来计算的三大支柱之一。” “CPU用于通用计算,GPU用于加速计算,而数据中心中传输数据
    发表于 11-03 10:55

    【KV260视觉入门套件试用体验】Vitis AI 构建开发环境,并使用inspector检查模型

    支持。需要做的不只是执行几条命令,还需要了解赛灵思硬件平台的特点,选择合适的模型和框架,使用 Vitis AI 提供的工具和库进行优化和编译,最后目标设备上运行您的 AI 应用。这个
    发表于 10-14 15:34

    【KV260视觉入门套件试用体验】Vitis-AI加速的YOLOX视频目标检测示例体验和原理解析

    本文将介绍如何使用Vitis-AI加速YOLOX模型实现视频中的目标检测,并对相关源码进行解读。由于演示的示例程序源码是Vitis-AI开源项目提供的,本文演示之前会介绍所需要的准备工作。演示之后
    发表于 10-06 23:32

    【KV260视觉入门套件试用体验】四、学习过程梳理&amp;DPU镜像&amp;Resnet50

    =xilinx-kv260-dpu-v2022.2-v3.0.0.img.gz 镜像下载 Vitis AI Library 用户指南 镜像安装教程,软件开发教程。 五、DPU-ResNet50 实验 ResNet50
    发表于 09-26 15:21

    【KV260视觉入门套件试用体验】部署DPU镜像并开发一个图像识别程序

    和安装环境的指令。模型编译需要的文件quantized文件夹中,放置一个pb文件。 1. 准备训练好的模型需要保证算子环境兼容,已知的vitis ai
    发表于 09-18 14:15

    加速AI应用“遍地开花”,中科驭数基于DPU的算力底座方案亮相2023全球AI芯片峰会

    高峰论坛发表题为《基于DPU的高效AI模型算力底座》的重要演讲。 ▲  中科驭数高级副总裁张宇受邀发表重要演讲 随着人工智能从高端科研领域向人们日常工作生活推进,传统数据中心都在向智
    的头像 发表于 09-15 20:10 450次阅读
    加速<b class='flag-5'>AI</b>应用“遍地开花”,<b class='flag-5'>中科</b>驭数基于<b class='flag-5'>DPU</b>的算力底座方案亮相2023全球<b class='flag-5'>AI</b>芯片峰会

    【KV260视觉入门套件试用体验】部署DPU镜像并运行Vitis AI图像分类示例程序

    DPU 编译和优化 ML 模型模型部署库和 API,用于从软件应用程序 DPU 引擎上集成和执行 ML
    发表于 09-10 23:01

    华为发布大模型时代AI存储新品

    7月14日,华为发布大模型时代AI存储新品, 为基础模型训练、行业模型训练,细分场景模型训练推理
    的头像 发表于 07-14 15:20 543次阅读
    华为发布大<b class='flag-5'>模型</b><b class='flag-5'>时代</b><b class='flag-5'>AI</b>存储新品

    中科驭数创始人、CEO鄢贵海谈DPU能否使算力“狂飙”?

    DPU能否使算力“狂飙”? |华泰证券对谈中科驭数创始人、CEO鄢贵海        近期,中科驭数创始人、CEO鄢贵海受邀参与华泰证券播客栏目《泰度VOICE》,与华泰创新投资总监刘诚围绕人工智能
    的头像 发表于 06-20 15:37 487次阅读

    中科驭数发布最新DPU芯片及应用方案

    近日,中科驭数携旗下重磅产品亮相两大国际展会——FPGA领域的顶会FCCM 2023、以及澳门BEYOND Expo 2023国际科技创新博览会,向海内外同行及与会人员展示了中科驭数在DPU领域的深厚积累和创新实力,获业界广泛关
    的头像 发表于 05-15 15:47 577次阅读