0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

浅谈算力调度

颖脉Imgtec 2024-11-08 03:00 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

来源:未来网络集团


近年来,随着5G人工智能物联网等新技术的快速普及应用,全社会数据总量爆发式增长,算力总规模快速上升。但总体上看,我国算力资源分布仍呈现“东部不足、西部有余”的不平衡局面,难以匹配大规模数据存储、计算、传输、应用的现实需求。打造跨区域算力调度体系,能够破除东中西部之间、枢纽节点与非枢纽节点之间算力供需壁垒,加快实现多级算力协同,有效解决我国算力资源分布不均问题。


1、算力调度的定义

算力调度(Computational Power Scheduling 或 Computing Resource Scheduling)是指在计算机集群、数据中心云计算环境中,对计算资源进行分配和管理的过程。尤其是针对大规模计算任务,如人工智能训练、大数据分析、高性能计算等,需要将有限的算力精准地分配到对应的任务中,提高计算效率和资源利用率。算力调度类似于电力调度。电力系统调度是由许多发电厂提供电能,通过输电、变电、配电、供电网络向广大用户供电,是一个复杂的系统。其产、供、销过程在一瞬间同时完成和平衡。算力中心可以类比发电厂,通信网络类比电力网络,算力的用户是大模型、应用等厂商,算力调度就是通过对算力的调度,使得算力的需求和供给达到平衡。


二、实现算力调度的核心技术

实现算力调度的技术涉及多个方面,这些技术共同构成了算力调度系统的核心。

1.算力感知

算力感知是实现算力调度的基础,通过感知全网的算力资源信息,包括计算资源、存储资源等,确保能够按需、实时地调度不同位置的算力资源。

2.算力度量

算力度量标准的建立可以将算力资源统一表达为包含计算、网络、存储等多维度资源的综合模型,是实现灵活调度多元异构算力资源的前提。

3.算力路由

算力路由的作用是根据所感知的抽象算网资源,综合考虑计算资源及网络状态,按需将业务流量灵活路由至适当的计算节点中。

4.算力调度算法

算力调度算法是算力调度系统的核心,它根据任务特性、资源可用性、用户需求等因素,实现最优的任务分配。

5.虚拟化技术

通过虚拟化技术,可以将物理算力资源划分为多个虚拟资源,允许多个用户或任务共享同一块物理算力资源,同时保证性能和资源的隔离。

6.容器编排技术

在算力调度中,容器编排技术扮演着关键角色,尤其是在高性能计算场景下。容器编排技术可以实现对容器化应用的高效调度和管理,确保应用能够按需、实时地获得所需的算力资源。

7.确定性网络技术

确定性网络技术为数据流传输提供提供带宽、时延、抖动等质量可确定的服务,有助于保障算力网络中的数据传输质量和稳定性。

8.算网编排技术
算网编排技术能够实现对算力资源和网络资源的统一编排和部署,确保算力任务能够按照预定的路径和策略执行。

值得一提的是,通过不断优化算力调度技术,也将推动算网协同调度的深化发展,进一步实现计算资源和网络资源的统一管理和协同工作,能够结合网络优势以更高性能、更优稳定性为各类任务的高效处理提供支撑。


三、发展算力调度平台

面对日益增长的算力需求与复杂多变的算力资源环境,建设算力调度平台成为重要趋势。它能够有效整合分散的算力资源,实现跨地域、跨架构、跨异构的高效调度与优化配置,确保算力资源按需分配、高效利用,从而支撑数字经济的高质量发展,满足各行业对算力资源的多样化需求。

应用场景

AI训练与推理:在AI大模型训练和推理过程中,算力调度平台能够实现跨资源池、跨架构、跨厂商的异构算力资源调度,满足AI训练作业的高算力需求。

云计算与数据中心:在云计算和数据中心领域,算力调度平台能够整合不同来源、类型和架构的算力资源,为用户提供按需获取和调度的服务。

智慧城市与物联网:在智慧城市和物联网领域,算力调度平台能够实现对海量数据的快速处理和分析,为城市管理和物联网应用提供强大的算力支持。

算力调度平台作为推动我国数字经济发展的重要基础设施之一,具有广阔的发展前景和应用空间。随着技术的不断进步和应用场景的不断拓展,算力调度平台将在未来发挥更加重要的作用。未来,随着全国一体化算力调度平台的建设将有利于全国算力供需的精准对接,推动算力像水电煤气网一样“随时随地、即取即用”。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 计算机
    +关注

    关注

    19

    文章

    7767

    浏览量

    92699
  • 算力
    +关注

    关注

    2

    文章

    1393

    浏览量

    16567
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    “四合一”平台,芯片国产化率超九成,兼容8种国产AI芯片

    电子发烧友网报道(文/李弯弯)4月11日消息,由中国移动承建的全国首个“四合一”网络调度平台正式投入使用。四合一是指将通用
    的头像 发表于 04-13 00:03 3606次阅读

    湘军,让变成生产

    脑极体
    发布于 :2025年11月25日 22:56:58

    捷智重大更新|API接口全面开放,调用更高效

    人工调度太耗时?业务系统对接总卡壳?捷智重磅升级——租赁平台API接口正式开放,让
    的头像 发表于 11-21 18:41 193次阅读
    捷智<b class='flag-5'>算</b>重大更新|API接口全面开放,<b class='flag-5'>算</b><b class='flag-5'>力</b>调用更高效

    华为联合中国移动研究院发布“路由AI推理及视联网应用样板”

    在网络中像调度流量一样调度资源,让应用根据实时网络与状态,灵活选择最佳路径和最佳
    的头像 发表于 08-25 19:23 1019次阅读

    软通智中标韶关公共服务平台项目

    日前,软通动力旗下软通智中标《韶关公共服务平台(一体化
    的头像 发表于 05-22 16:19 731次阅读

    华为助力湖北移动打造“九州”互联网区域标杆

    数字经济时代,是关键新质生产,中国移动“九州”互联网是促进
    的头像 发表于 05-13 16:11 724次阅读

    梯度科技助力客户破解调度难题

    在数字经济与人工智能深度融合的新阶段,已成为支撑人工智能发展的核心生产。梯度科技基于云原生技术架构研发的
    的头像 发表于 04-27 16:32 1028次阅读

    芯片的生态突围与革命

    电子发烧友网报道(文 / 李弯弯)大芯片,即具备强大计算能力的集成电路芯片,主要应用于高性能计算(HPC)、人工智能(AI)、数据中心、自动驾驶等需要海量数据并行计算的场景。随着 AI 与大数
    的头像 发表于 04-13 00:02 2627次阅读

    弘信电子旗下燧弘华创与联想发布多元异构调度平台

    近日,燧弘华创庆阳绿色智中心迎来里程碑时刻——由燧弘华创与联想合作共建的多元异构调度平台正式发布。
    的头像 发表于 03-31 11:41 885次阅读

    网,是否像电力网一样?

    网,其系统的复杂度和面对的挑战要远大于电力网。如果仅考虑“网”的特征,仅关注调度,那么网的竞争
    的头像 发表于 03-24 11:45 568次阅读
    <b class='flag-5'>算</b><b class='flag-5'>力</b>网,是否像电力网一样?

    【一文看懂】什么是端侧

    随着物联网(IoT)、人工智能和5G技术的快速发展,端侧正逐渐成为智能设备性能提升和智能化应用实现的关键技术。什么是端侧,它的应用价值是什么,与云计算、边缘计算有哪些区别?本文
    的头像 发表于 02-24 12:02 3070次阅读
    【一文看懂】什么是端侧<b class='flag-5'>算</b><b class='flag-5'>力</b>?

    中心的如何衡量?

    作为当下科技发展的重要基础设施,其的衡量关乎其能否高效支撑人工智能、大数据分析等智能应用的运行。以下是对智中心算衡量的详细阐述:一、
    的头像 发表于 01-16 14:03 4290次阅读
    <b class='flag-5'>算</b>智<b class='flag-5'>算</b>中心的<b class='flag-5'>算</b><b class='flag-5'>力</b>如何衡量?

    科技云报到:要更要“利”,“精装”触发大模型产业新变局?

    科技云报到:要更要“利”,“精装”触发大模型产业新变局?
    的头像 发表于 01-16 10:24 813次阅读

    融合 南京信易达发布全新“智能融合平台”

    四大系统模块,为集群提供全面的运营运维管理服务与用户自助服务。 通过资源监控、作业调度、应用中心、数据中心等功能,一站式解决多元的管
    的头像 发表于 01-08 10:56 1282次阅读
    超<b class='flag-5'>算</b>智<b class='flag-5'>算</b>融合 南京信易达发布全新“智能<b class='flag-5'>算</b><b class='flag-5'>力</b>融合平台”