0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

智谱AI亮相2024 ICLR,分享面向AGI的三大技术趋势

独角兽科技 来源:独角兽科技 作者:独角兽科技 2024-05-11 10:29 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

北京时间 5 月 9 日晚,ICLR 2024 会场,GLM大模型技术团队受邀发表题为 The ChatGLM's Road to AGI 的主旨演讲,全面阐述GLM大模型面向 AGI 三大技术趋势。

wKgaomY-C6iAJpIIAAjYI0_9nX8392.png

第一,GLM-4的后续升级版本即GLM-4.5及其升级模型,应当基于超级认知(Superintelligence)和超级对齐(Superalignment)技术。

GLM大模型团队认为,文本是构建大模型最关键的基础,但下一步则应该把文本、图像、视频、音频等多种模态混合在一起训练,构建真正原生的多模态模型,同时超级对齐(Superalignment)技术将协助提升大模型的安全性。

第二,为解决更加复杂的问题,GLM大模型团队提出GLM-OS概念,即以大模型为中心的通用计算系统。在ICLR现场,GLM大模型团队详细阐述了GLM-OS的实现方式:基于已有 All-Tools 能力加上内存记忆(memory)和自我反馈(self-reflection) 机制,GLM-OS 有望实现模仿人类的Plan-Do-Check-Act 循环。

首先做出计划,然后初步尝试形成反馈,基于反馈结果调整规划,然后再行动以期达到更好的效果。大模型依靠PDCA循环机制形成自我反馈和自我提升——恰如人类自己所做一样。

第三,GLM大模型团队还在现场讲解了自2019年以来团队就一直在研究的名为GLM-zero的技术。GLM-zero旨在研究人类的“无意识”学习机制。“当人在睡觉的时候,大脑依然在无意识地学习。”GLM大模型团队表示,“无意识”学习机制是人类认知能力的重要组成部分,包括自我学习(self-instruct)、自我反思(self-reflection)和自我批评(self-critics)。

人脑中存在着反馈 (feedback) 和决策 (decision-making) 两个系统,分别对应着大模型和内存记忆两大部分,GLM-zero的相关研究将进一步拓展人类对意识、知识、学习行为的理解,换而言之,尽管还处于非常早期的研究阶段,但GLM-zero可以视为通向AGI的必经之路,这是GLM大模型团队第一次向外界公开这一技术趋势。

除了阐述GLM大模型面向AGI的三大技术趋势,GLM大模型技术团队在ICLR主旨演讲中还回顾了国产自研大模型 ChatGLM 的演进之路,向现场近2000名与会嘉宾与学者介绍了GLM系列大模型多项前沿研究成果,涵盖数学、文生图、图像理解、视觉UI理解、Agent智能体、涌现现象等领域。这是中国大模型团队首度登上 ICLR 主旨演讲环节。

ICLR 国际学习表征会议由深度学习巨头、图灵奖获得者 Yoshua Bengio 和 Yann LeCun 在2013年牵头举办,与ICML、NeurIPS 并称为机器学习领域水平最高会议之一。5月7日,ICLR 2024 在奥地利维也纳会展中心开幕,受新一波人工智能浪潮推动,本届ICLR在参展人数、展览规模、论文数量上均创新高。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    91

    文章

    41060

    浏览量

    302569
  • 数据模型
    +关注

    关注

    0

    文章

    53

    浏览量

    10340
  • Agi
    Agi
    +关注

    关注

    0

    文章

    104

    浏览量

    10856
  • 大模型
    +关注

    关注

    2

    文章

    3765

    浏览量

    5269
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    Arm AGI CPU加速新一代基础设施建设

    近期,Arm 推出 Arm AGI CPU,一款由 Arm 自主设计、面向人工智能 (AI) 数据中心的 CPU,旨在满足日益增长的代理式 AI (Agentic
    的头像 发表于 04-09 15:55 306次阅读

    西井科技携手同济大学 AI研究成果入选顶会ICLR 2026

    科技携手同济大学长聘教授、上海创智学院全时导师陈广,共有3篇人工智能研究成果被大会正式录用。作为全球人工智能领域最具影响力的学术会议之一,ICLR 致力于推动深度学习与表征学习的前沿突破。此次篇论文同时入选,不仅彰显西井科技在基础研究方面的深厚积累,也标志着公司与同济大
    的头像 发表于 02-12 17:42 1.1w次阅读
    西井科技携手同济大学 <b class='flag-5'>三</b>篇<b class='flag-5'>AI</b>研究成果入选顶会<b class='flag-5'>ICLR</b> 2026

    从FPGA应用前景视角解读Gartner 2026十大关键技术趋势(下)

    一、概述Gartner每年面向CIO/CTO发布《十大关键战略技术趋势》报告,为企业机构技术变革、业务转型决策提供未来五年可能带来重大变革与机遇的
    的头像 发表于 12-19 13:57 860次阅读
    从FPGA应用前景视角解读Gartner 2026十大关键<b class='flag-5'>技术</b><b class='flag-5'>趋势</b>(下)

    从FPGA应用前景视角解读Gartner 2026十大关键技术趋势(上)

    一、概述Gartner每年面向CIO/CTO发布《十大关键战略技术趋势》报告,为企业机构技术变革、业务转型决策提供未来五年可能带来重大变革与机遇的
    的头像 发表于 12-17 17:17 1542次阅读
    从FPGA应用前景视角解读Gartner 2026十大关键<b class='flag-5'>技术</b><b class='flag-5'>趋势</b>(上)

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片到AGI芯片

    、分布式群体智能 1)物联网AGI系统 优势: 组成部分: 2)分布式AI训练 7、发展重点:基于强化学习的后训练与推理 8、超越大模型:神经符号计算 AGI芯片的实现 1、
    发表于 09-18 15:31

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI的科学应用

    主要步骤: ①溯因②假说③实验 1、科学推理的类型 ①演绎②归纳 2、自动化科学发现框架 AI-笛卡儿-----自动化科学发现框架,利用数据和知识来生成和评估候选的科学假说。 4项规则:、直觉
    发表于 09-17 11:45

    AI芯片:科技探索与AGI愿景》—— 勾勒计算未来的战略罗盘

    如果说算力是AGI的“燃料”,那么AI芯片就是制造燃料的“精炼厂”。本书的卓越之处在于,它超越了单纯的技术拆解,成功绘制了一幅从专用智能迈向通用智能的“战略路线图”。作者以芯片为棱镜,折射出算法
    发表于 09-17 09:32

    AI芯片:科技探索与AGI愿景》—— 深入硬件核心的AGI指南

    。 (图1:多种AI芯片架构的对比剖析示意图) 尤为可贵的是,本书并未沦为冰冷的技术手册。作者始终将芯片的演进置于AGI发展的宏大叙事中,深刻论证了“没有专属硬件,AGI只是空
    发表于 09-17 09:29

    【「AI芯片:科技探索与AGI愿景」阅读体验】+半导体芯片产业的前沿技术

    半导体芯片是现在世界的石油,它们推动了经历、国防和整个科技行业。-------------帕特里克-基辛格。 AI的核心是一系列最先进的半导体芯片。那么AI芯片最新技术以及创新有哪些呢。 本章节作者
    发表于 09-15 14:50

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片的需求和挑战

    当今社会,AI已经发展很迅速了,但是你了解AI的发展历程吗?本章作者将为我们打开AI的发展历程以及需求和挑战的面纱。 从2017年开始生成式AI开创了新的时代,经历了
    发表于 09-12 16:07

    【「AI芯片:科技探索与AGI愿景」阅读体验】+可期之变:从AI硬件到AI湿件

    的不同。随着AI热潮的兴起,大脑的抽象模型已被提炼成各种的AI算法,并使用半导体芯片技术加以实现。 而大脑是一个由无数神经元通过突触连接而成的复杂网络,是极其复杂和精密的。大脑在本质上就是一台湿润的软组织
    发表于 09-06 19:12

    【「AI芯片:科技探索与AGI愿景」阅读体验】+内容总览

    AI芯片:科技探索与AGI愿景》这本书是张臣雄所著,由人民邮电出版社出版,它与《AI芯片:前沿技术与创新未来》一书是姊妹篇,由此可见作者在AI
    发表于 09-05 15:10

    【书籍评测活动NO.64】AI芯片,从过去走向未来:《AI芯片:科技探索与AGI愿景》

    和管理人员、创投从业者以及相关专业学生等,都可以从这两本书中把握AI芯片的技术动向,为产业落地提供关键洞察。 立足当下,洞察趋势,《AI芯片:科技探索与
    发表于 07-28 13:54

    电子入选2024年度无锡市雏鹰企业培育库

    近日,无锡市科技局公布了《2024 年度无锡市雏鹰、瞪羚、准独角兽企业培育拟入库企业名单公示》,无锡飞电子信息技术有限公司凭借在CAE/EDA软件领域的卓越创新表现与发展潜力,成功入选无锡市
    的头像 发表于 07-18 16:24 1068次阅读

    【「零基础开发AI Agent」阅读体验】+ 入门篇学习

    很高兴又有机会学习ai技术,这次试读的是「零基础开发AI Agent」,作者叶涛、管锴、张心雨。 大模型的普及是近年来的一件大事,万物皆可大模型已成为
    发表于 05-02 09:26