0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

网络开源技术的发展趋势和未来的挑战

驭数科技 来源:驭数科技 2023-06-13 14:35 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

2023年6月,第三届网络开源技术生态峰会在北京成功召开。中科驭数高级副总裁、CTO卢文岩博士受邀出席本届峰会,并在活动主论坛分享题为《P4可编程的DPU 让算网生态更加开放融合》的主题演讲。

数据中心“税”与异网融合“税”是当前算网生态的两大痛


算力,毫无疑问是当前数字经济发展的核心增长力,已经成为像水、电、网一样的基础性生产要素,事关到整个核心要素的升级,是驱动经济社会数字化转型的新引擎。 演讲伊始,卢文岩博士简要介绍了针对当前业界普遍达成共识的分层算力网络结构,并表示统筹云、网、边、端于一体的新一代计算技术已成为算力网络的发展方向。 最上层的云层是各类云计算平台和云服务提供商,提供大规模的计算和存储资源;网层提供云之间的高速连接;边层位于离用户和数据源更近的位置,提供低延迟、高可用性的计算和存储服务;端层是接入侧的设备,是数据的产生和接入点。这一分层结构使得算力网络能够满足不同应用场景的需求,实现云、网、边、端的协同工作。 这一算力网络架构,在发展过程中面临着数据中心“税”与异网融合“税”两大痛点。前者是指在现在的基础设施架构中,虚拟化管理和网络需要占据很多CPU资源。以某公有云厂商网络增强型云主机为例,基于2x25G普通网卡,24核CPU中4核用于虚拟网络功能,1核用于虚拟化管理功能,可用CPU资源不足80%。 而后者的痛点则在于异网融合的过程中,往往需要解决沉重的历史包袱,不同网络协议之间的通信需要大量专用的网络设备完成相应的转换,随着算网规模的扩大,不仅增加了网络管理的复杂性,还限制了算力网络的灵活性和可扩展性。

1ec8d8ee-0917-11ee-962d-dac502259ad0.png

这些挑战和限制,在来自云厂商和芯片厂商的行业专家的演讲中也得到了回应,他们结合各家实践经验,给出了更为具体的阐述。 中国移动研究院副院长段晓东指出,智算中心的发展是整个算力网络体系架构发展的重中之重,如何构筑一个区别于传统运营中心的新型智算中心,在算、存、网、管、效五个方面都有很大的提升和不同。传统的数据中心以CPU为核心的单机双路到GPU为核心的八卡互联,总线结构发生了飞跃变化。存储也从结构化单一到混合协议存储大量非结构数据。网络技术更重要,从普通以太网以10G、20G为核心,现在跃迁到200-400G。异构算力、算力原生,已经成为非常重要的诉求。 腾讯云与边缘网络技术总监陈炜先生在谈到腾讯云在算力网络方面的实践时提及,进入大AI模型时代,整个机房对电和算力的基础设施包括网络带来了新的挑战。堆砌GPU集群,已不再意味着能充分释放算力。极端情况下,网络通信时延会占据整个一次模型训练50%的时间,是非常惊人的数字。同时丢包给整个的网络的吞吐,也会带来50%的下降。 英特尔资深云网络技术专家丁晓艳也表示当前最大的瓶颈在于,随着算网融合、算力运算等各种云网络、边缘网络新应用的发展,以Tofino为代表的P4交换机无法应对随之而来的带宽需求,对于延时和抖动也无法得到保证。


DPU是下一代“算力网络”的核心算力芯片

为了解决当前算网生态面临的问题,灵活可编程的网络接入设备是解决此类问题的一个最优解。因此,DPU(Data Processing Unit)作为下一代"算力网络"的核心算力芯片应运而生,能够从硬件层面直接解决底层基础设施层面临的关键问题。 卢文岩博士指出,DPU本质上是一个可编程的Switch,中科驭数在两年前就发现了P4的魅力所在,并在DPU芯片功能定义的研发阶段布局了P4技术。到现在为止,中科驭数DPU芯片已全面支持P4编程,能够在数据中心、网络边缘和终端设备上提供了更大的灵活性和可扩展性;围绕DPU构建的软件开发平台HADOS,也可以为P4提供完善的技术支撑,加速P4技术在SDN网络中的研发落地应用。

P4可编程的DPU优势,首先在于高性能,整个执行下沉到专用硬件逻辑之中,可以有效提升系统的执行效率和处理能力;其次是高度可编程,当前算网融合过程中需要解决各类网络协议的转化和融合问题,DPU具备可编程能力可支撑自定义的场景、支持自定义协议栈快速开发;第三是低数据中心“税”,网络数据面处理完全下沉后可以大幅度降低现有数据中心的数据“税”,P4 runtime管控面也可以下沉到DPU,进一步释放服务器算力。 针对传统P4技术在有状态卸载、多功能核融合两方面存在的缺陷,卢文岩博士着重介绍了中科驭数第三代DPU芯片K2 Pro,并对其中网络架构的处理核展开详细展开说明——K2 Pro在芯片内部专门集成了可编程网络处理引擎以及专用数据分析引擎,不仅可以高效地完成数据增删改查、甚至更复杂的操作,更主要的目的——支持有状态的信息存储和查询,有效提升DPU芯片的性能、灵活性和资源利用效率。

1f0b945e-0917-11ee-962d-dac502259ad0.png

DPU P4技术将为算力网络提供坚实的可编程底座 对于DPU P4技术在算网领域的落地场景,卢文岩博士也作了进一步阐述。DPU P4技术的可编程性和灵活性,使得其在网关、服务器端、防火墙和比较协议等场景的应用中具备更大的优势,网络设备能够根据实际需求动态调整和配置网络协议,实现更高效、智能的数据处理和网络管理。这一特点将为这些应用场景带来更好的性能、安全性和可靠性。 以分布式NAT网关为例,当前公有云/混合云/私有云在与边缘云对接的场景中,受限于各地不同接入条件,存在大量需要NAT转换场景。传统方案中往往使用专有网关设备实现,成本高、性能差。DPU P4解决方案能够灵活支持各种动态与静态地址转换需求。基于高性能硬件,性能提升4倍以上;支持分布式网关部署,可以根据业务情况动态调整;网关DPU与服务器DPU采用相同硬件,可以更好的保护硬件投资。

1f41d532-0917-11ee-962d-dac502259ad0.png

本届网络开源技术生态峰会由中国通信学会指导,中国通信学会开源技术委员会、江苏省未来网络创新研究院主办,SDNLAB社区、阿里云计算有限公司协办。主论坛深入探讨了网络开源技术的发展趋势和未来的挑战,激发了新的思考和创新。相信通过共同努力,DPU P4技术将为算网生态的开放融合带来新的可能性,推动算力网络的发展和创新,为未来的数字化社会提供更强大、更可靠的算力支持。
责任编辑:彭菁

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 存储
    +关注

    关注

    13

    文章

    4697

    浏览量

    89579
  • 数字化
    +关注

    关注

    8

    文章

    10323

    浏览量

    66564
  • 开源技术
    +关注

    关注

    0

    文章

    389

    浏览量

    8691

原文标题:P4可编程的DPU 让算网生态更加开放融合!|第三届网络开源技术生态峰会

文章出处:【微信号:yusurtech,微信公众号:驭数科技】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    电磁环境模拟及侦察系统的作用、技术特点及未来发展趋势

    电磁环境模拟及侦察系统的作用、技术特点及未来发展趋势
    的头像 发表于 12-07 11:30 53次阅读
    电磁环境模拟及侦察系统的作用、<b class='flag-5'>技术</b>特点及<b class='flag-5'>未来</b><b class='flag-5'>发展趋势</b>

    AI+工业物联网的未来发展趋势有哪些

    AI与工业物联网(IIoT)的融合正从“技术试点”迈向“规模应用”阶段,其未来发展趋势呈现深度融合、全链条重构、生态化协同与全球化拓展的特征,具体表现为以下六大核心方向: 一、工业大模型垂直化与场景
    的头像 发表于 09-24 14:58 518次阅读

    [新启航]碳化硅 TTV 厚度测量技术未来发展趋势与创新方向

    。随着碳化硅产业向大尺寸、高性能方向发展,现有测量技术面临诸多挑战,探究未来发展趋势与创新方向迫在眉睫。 二、提升测量精度与分辨率
    的头像 发表于 09-22 09:53 1481次阅读
    [新启航]碳化硅 TTV 厚度测量<b class='flag-5'>技术</b>的<b class='flag-5'>未来</b><b class='flag-5'>发展趋势</b>与创新方向

    碳化硅衬底 TTV 厚度测量技术的最新发展趋势未来展望

    摘要 本文聚焦碳化硅衬底晶圆总厚度变化(TTV)厚度测量技术,剖析其在精度提升、设备小型化及智能化测量等方面的最新发展趋势,并对未来在新兴应用领域的拓展及推动半导体产业发展的前景进行展
    的头像 发表于 09-01 11:58 748次阅读
    碳化硅衬底 TTV 厚度测量<b class='flag-5'>技术</b>的最新<b class='flag-5'>发展趋势</b>与<b class='flag-5'>未来</b>展望

    AI工艺优化与协同应用的未来发展趋势是什么?

    AI 工艺优化与协同应用在制造业、医疗、能源等众多领域已经展现出巨大潜力,未来,它将在技术融合、应用拓展、产业生态等多方面迎来新的发展趋势
    的头像 发表于 08-28 09:49 742次阅读
    AI工艺优化与协同应用的<b class='flag-5'>未来</b><b class='flag-5'>发展趋势</b>是什么?

    人工智能技术的现状与未来发展趋势

    人工智能技术的现状与未来发展趋势     近年来,人工智能(AI)技术迅猛发展,深刻影响着各行各业。从计算机视觉到自然语言处理,从自动驾驶到
    的头像 发表于 07-16 15:01 1204次阅读

    物联网未来发展趋势如何?

    ,人们才会更加信任和接受物联网技术。 综上所述,物联网行业的未来发展趋势非常广阔。智能家居、工业互联网、智慧城市、医疗保健以及数据安全和隐私保护都将成为物联网行业的热点领域。我们有理由相信,在不久的将来,物联网将进一步改变我们
    发表于 06-09 15:25

    混合信号设计的概念、挑战发展趋势

    本文介绍了集成电路设计领域中混合信号设计的概念、挑战发展趋势
    的头像 发表于 04-01 10:30 1212次阅读

    工业电机行业现状及未来发展趋势分析

    过大数据分析的部分观点,可能对您的企业规划有一定的参考价值。点击附件查看全文*附件:工业电机行业现状及未来发展趋势分析.doc 本文系网络转载,版权归原作者所有。本文所用视频、图片、文字如涉及作品版权问题,请第一时间告知,删除内
    发表于 03-31 14:35

    驱动电机核心零部件的发展趋势技术挑战

    通过电机高转速实现极致车速是总成的一个重要发展趋势;BYD 于 2024 年 批产应用最高工作转速超过 23000rpm,小米目标在 2025 年推出超过 27000rpm 的电机,按照这个趋势 2028 年电机最高工作转速将突破 30000rpm。
    的头像 发表于 03-01 14:27 1234次阅读
    驱动电机核心零部件的<b class='flag-5'>发展趋势</b>和<b class='flag-5'>技术</b><b class='flag-5'>挑战</b>

    浅析半导体激光器的发展趋势

    文章综述了现有高功率半导体激光器(包括单发射腔、巴条、水平阵列和垂直叠阵)的封装技术,并讨论了其发展趋势;分析了半导体激光器封装技术存在的问题和面临的挑战,并给出解决问题与迎接
    的头像 发表于 02-26 09:53 1700次阅读
    浅析半导体激光器的<b class='flag-5'>发展趋势</b>

    电力电子技术的应用与发展趋势

    本文探讨了电力电子技术在不同领域的应用情况,并对其未来发展趋势进行了分析,旨在为相关行业的发展提供参考。 关键词 :电力电子技术;应用;
    的头像 发表于 01-17 10:18 2765次阅读

    蓝牙人员定位的未来发展趋势

    人员的移动轨迹和行为数据,为安全管理提供有力支持。 随着技术的不断进步和应用场景的不断拓展,蓝牙人员定位技术将呈现出以下发展趋势:精度提高:通过优化算法和采用更先进的定位技术,蓝牙人员
    的头像 发表于 01-03 10:17 565次阅读

    KWDB开源数据库的未来发展趋势

    近日,在2024开放原子开发者大会暨首届开源技术学术大会开幕式上,开放原子开源基金会与openKylin、EasyAda、KWDB开源项目举行了捐赠签约仪式。
    的头像 发表于 01-02 10:31 694次阅读

    富士通预测2025年AI领域的发展趋势

    过去一年中,人工智能技术飞速发展,在各行各业都收获了巨大进展。面对即将到来的2025年,富士通技术研发团队的专家对AI领域的发展趋势进行了展望,让我们来看看
    的头像 发表于 12-27 11:23 1398次阅读