0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

并行计算的黄金时代到了?

汽车玩家 来源: 科技日报 作者:刘艳 2020-04-03 17:18 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

当前,“新基建”成为推动经济发展、促进产业升级、科技进步的重要角色,也对我国先进计算软件和应用生态带来诸多机遇和挑战。数据显示,2019年,我国软件业务收入突破7万亿元,同比增长15.4%,较同期电子信息制造业营业收入增速高10.9个百分点。在此次推动的“新基建”中,软件也将发挥其无处不在的“灵魂”作用。

“未来几十年将进入并行计算黄金时代,并行计算软件和算法的开发将从技术驱动转向应用驱动,需要计算与应用等不同领域的专家共同合作开发。”中国工程院院士李国杰日前表示。

所谓并行计算,是相对于串行计算来说的。它是一种一次可执行多个指令的算法,目的是提高计算速度,及通过扩大问题求解规模,解决大型而复杂的计算问题。软件工程师的说法是,如果计算1+1、1+2,普通计算需要算2次,而并行计算则可以两个同时算。

在李国杰看来,我国选择的并行计算发展道路,是从先研发高性能、大规模的并行计算设备入手,在推出成熟的产品后,再寻找相适应的应用。这种选择的优势,是可以在短期内推出高性能的超级计算机,并持续优化,我国在全球超级计算机TOP500排行榜中成绩突出就是例证。

但机遇与挑战并存,如中科曙光总裁历军所言,我国在计算硬件设施领域位居世界前列,但在计算软件生态、软件应用能力及人才培养方面,与先进国家存在不小差距。据了解,目前我国并行计算研究领域的人才需求出现了明显缺口,作为一个计算工具,并行计算只有在更广泛的学科得到应用,才能真正体现出价值。

“计算机体系结构的改进必须和并行算法、并行软件同步进行,而且越是高层的改进得到的效率提高就越大。”李国杰提醒业界要注意3个问题。

首先,并行算法和并行软件设计中,必须同时考虑降低功耗和提高性能,能耗增加倍数超过性能提高倍速的并行算法和软件没有推广前途。

其次,不管是芯片还是并行算法和软件设计,不能只满足于对小应用的性能提高,应当考虑覆盖整个应用的范围,提高并行计算的通用性。

最后,要注意应用拉动研究,促成计算机科学工作者和应用领域专家一起开发关键的并行应用程序,其他领域的学者运用普遍流行的算法和软件可以解决一些局部性的问题,但要获得算法上的根本性突破,需要与真正懂算法的计算机科学家深度合作。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 并行计算
    +关注

    关注

    0

    文章

    30

    浏览量

    9698
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    为啥 AI 计算速度这么惊人?—— 聊聊 GPU、内存与并行计算

    提到AI,大家常说它“算得快”,其实是指AI能在眨眼间处理海量数据。可它为啥有这本事?答案就藏在“GPU+高速内存+并行计算”这trio(组合)里。咱们可以把AI要处理的数据,想象成一大堆“小任务
    的头像 发表于 12-05 14:35 301次阅读
    为啥 AI <b class='flag-5'>计算</b>速度这么惊人?—— 聊聊 GPU、内存与<b class='flag-5'>并行计算</b>

    一文看懂AI大模型的并行训练方式(DP、PP、TP、EP)

    大家都知道,AI计算(尤其是模型训练和推理),主要以并行计算为主。AI计算中涉及到的很多具体算法(例如矩阵相乘、卷积、循环层、梯度运算等),都需要基于成千上万的GPU,以并行任务的方式
    的头像 发表于 11-28 08:33 964次阅读
    一文看懂AI大模型的<b class='flag-5'>并行</b>训练方式(DP、PP、TP、EP)

    神经网络的并行计算与加速技术

    问题。因此,并行计算与加速技术在神经网络研究和应用中变得至关重要,它们能够显著提升神经网络的性能和效率,满足实际应用中对快速响应和大规模数据处理的需求。神经网络并行
    的头像 发表于 09-17 13:31 893次阅读
    神经网络的<b class='flag-5'>并行计算</b>与加速技术

    从自然仿真到智能调度——GPU并行计算的多场景突破

    我们正在参加全球电子成就奖的评选,欢迎大家帮我们投票~~~谢谢支持随着复杂计算问题的不断涌现,传统的CPU串行计算在处理大规模数据与高并发任务时逐渐显露瓶颈。GPU(图形处理单元)凭借其高度并行
    的头像 发表于 09-03 10:32 589次阅读
    从自然仿真到智能调度——GPU<b class='flag-5'>并行计算</b>的多场景突破

    Kintex UltraScale 纯 FPGA 开发平台,释放高速并行计算潜能,高性价比的 FPGA 解决方案

    璞致电子PZ-KU060-KFB开发板采用Xilinx Kintex UltraScale KU060芯片,提供高密度并行计算能力,配备4GB DDR4内存、20对GTH高速收发器和多种扩展接口
    的头像 发表于 08-18 13:28 510次阅读
    Kintex UltraScale 纯 FPGA 开发平台,释放高速<b class='flag-5'>并行计算</b>潜能,高性价比的 FPGA 解决方案

    信创浪潮澎湃,国产主板迎来黄金时代

    2025年7月,表示必须在2027年底前完成信创100%替代,覆盖基础硬件、基础软件等核心领域。在信息技术应用创新浪潮席卷下,国产主板作为计算机系统的骨架,正从幕后走向台前。政策加持、技术突破与生态协同的三重动力,正推动这一领域迎来前所未有的发展机遇期。
    的头像 发表于 07-21 14:00 369次阅读

    AI芯片:加速人工智能计算的专用硬件引擎

    人工智能(AI)的快速发展离不开高性能计算硬件的支持,而传统CPU由于架构限制,难以高效处理AI任务中的大规模并行计算需求。因此,专为AI优化的芯片应运而生,成为推动深度学习、计算机视觉、自然语言
    的头像 发表于 07-09 15:59 937次阅读

    边缘AI广泛应用推动并行计算崛起及创新GPU渗透率快速提升

    是时候重新教育整个生态了。边缘AI的未来不属于那些高度优化但功能狭窄的芯片,而是属于可编程的、可适配的并行计算平台,它们能与智能软件共同成长并扩展。
    的头像 发表于 06-11 14:57 492次阅读

    读懂极易并行计算:定义、挑战与解决方案

    GPU经常与人工智能同时提及,其中一个重要原因在于AI与3D图形处理本质上属于同一类问题——它们都适用极易并行计算。什么是极易并行计算?极易并行计算指的是符合以下特征的计算任务:任务独
    的头像 发表于 04-17 09:11 661次阅读
    读懂极易<b class='flag-5'>并行计算</b>:定义、挑战与解决方案

    科技云报到:鏖战企业级市场,AI Agent如何重塑智能商业未来?

    Agent“黄金时代”已至,RPA如何搭上这班车?
    的头像 发表于 04-09 17:56 473次阅读

    GPU加速计算平台的优势

    传统的CPU虽然在日常计算任务中表现出色,但在面对大规模并行计算需求时,其性能往往捉襟见肘。而GPU加速计算平台凭借其独特的优势,吸引了行业内人士的广泛关注和应用。下面,AI部落小编为大家分享GPU加速
    的头像 发表于 02-23 16:16 769次阅读

    云 GPU 加速计算:突破传统算力瓶颈的利刃

    ,犹如一把利刃,成功突破了传统算力的瓶颈。 传统的 CPU 计算在面对大规模并行计算任务时,往往显得力不从心。CPU 核心数量有限,且设计侧重于复杂的逻辑控制和串行处理,无法高效处理海量的并行数据。而 GPU 则具有大量的核心,
    的头像 发表于 02-17 10:36 522次阅读

    解析DeepSeek MoE并行计算优化策略

    本期Kiwi Talks将从集群Scale Up互联的需求出发,解析DeepSeek在张量并行及MoE专家并行方面采用的优化策略。DeepSeek大模型的工程优化以及国产AI 产业链的开源与快速部署预示着国产AI网络自主自控将大有可为。
    的头像 发表于 02-07 09:20 2717次阅读
    解析DeepSeek MoE<b class='flag-5'>并行计算</b>优化策略

    xgboost的并行计算原理

    在大数据时代,机器学习算法需要处理的数据量日益增长。为了提高数据处理的效率,许多算法都开始支持并行计算。XGBoost作为一种高效的梯度提升树算法,其并行计算能力是其受欢迎的原因
    的头像 发表于 01-19 11:17 1584次阅读

    直播预告|RISC-V 并行计算技术沙龙,邀您与国内外专家共探 AI 时代无限可能

    的发展趋势备受瞩目。而并行计算作为提升AI性能的关键技术,与RISC-V的结合为行业注入了全新的可能与动力。为了推动RISC-V在人工智能、科学计算和加速计算等领
    的头像 发表于 01-14 09:52 942次阅读
    直播预告|RISC-V <b class='flag-5'>并行计算</b>技术沙龙,邀您与国内外专家共探 AI <b class='flag-5'>时代</b>无限可能