0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

智谱AI亮相2024 ICLR,分享面向AGI的三大技术趋势

独角兽科技 来源:独角兽科技 作者:独角兽科技 2024-05-11 10:29 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

北京时间 5 月 9 日晚,ICLR 2024 会场,GLM大模型技术团队受邀发表题为 The ChatGLM's Road to AGI 的主旨演讲,全面阐述GLM大模型面向 AGI 三大技术趋势。

wKgaomY-C6iAJpIIAAjYI0_9nX8392.png

第一,GLM-4的后续升级版本即GLM-4.5及其升级模型,应当基于超级认知(Superintelligence)和超级对齐(Superalignment)技术。

GLM大模型团队认为,文本是构建大模型最关键的基础,但下一步则应该把文本、图像、视频、音频等多种模态混合在一起训练,构建真正原生的多模态模型,同时超级对齐(Superalignment)技术将协助提升大模型的安全性。

第二,为解决更加复杂的问题,GLM大模型团队提出GLM-OS概念,即以大模型为中心的通用计算系统。在ICLR现场,GLM大模型团队详细阐述了GLM-OS的实现方式:基于已有 All-Tools 能力加上内存记忆(memory)和自我反馈(self-reflection) 机制,GLM-OS 有望实现模仿人类的Plan-Do-Check-Act 循环。

首先做出计划,然后初步尝试形成反馈,基于反馈结果调整规划,然后再行动以期达到更好的效果。大模型依靠PDCA循环机制形成自我反馈和自我提升——恰如人类自己所做一样。

第三,GLM大模型团队还在现场讲解了自2019年以来团队就一直在研究的名为GLM-zero的技术。GLM-zero旨在研究人类的“无意识”学习机制。“当人在睡觉的时候,大脑依然在无意识地学习。”GLM大模型团队表示,“无意识”学习机制是人类认知能力的重要组成部分,包括自我学习(self-instruct)、自我反思(self-reflection)和自我批评(self-critics)。

人脑中存在着反馈 (feedback) 和决策 (decision-making) 两个系统,分别对应着大模型和内存记忆两大部分,GLM-zero的相关研究将进一步拓展人类对意识、知识、学习行为的理解,换而言之,尽管还处于非常早期的研究阶段,但GLM-zero可以视为通向AGI的必经之路,这是GLM大模型团队第一次向外界公开这一技术趋势。

除了阐述GLM大模型面向AGI的三大技术趋势,GLM大模型技术团队在ICLR主旨演讲中还回顾了国产自研大模型 ChatGLM 的演进之路,向现场近2000名与会嘉宾与学者介绍了GLM系列大模型多项前沿研究成果,涵盖数学、文生图、图像理解、视觉UI理解、Agent智能体、涌现现象等领域。这是中国大模型团队首度登上 ICLR 主旨演讲环节。

ICLR 国际学习表征会议由深度学习巨头、图灵奖获得者 Yoshua Bengio 和 Yann LeCun 在2013年牵头举办,与ICML、NeurIPS 并称为机器学习领域水平最高会议之一。5月7日,ICLR 2024 在奥地利维也纳会展中心开幕,受新一波人工智能浪潮推动,本届ICLR在参展人数、展览规模、论文数量上均创新高。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    89

    文章

    38091

    浏览量

    296601
  • 数据模型
    +关注

    关注

    0

    文章

    53

    浏览量

    10267
  • Agi
    Agi
    +关注

    关注

    0

    文章

    95

    浏览量

    10743
  • 大模型
    +关注

    关注

    2

    文章

    3440

    浏览量

    4964
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片到AGI芯片

    、分布式群体智能 1)物联网AGI系统 优势: 组成部分: 2)分布式AI训练 7、发展重点:基于强化学习的后训练与推理 8、超越大模型:神经符号计算 AGI芯片的实现 1、
    发表于 09-18 15:31

    【「AI芯片:科技探索与AGI愿景」阅读体验】+具身智能芯片

    、步态识别和跌倒检测等,也可以通过检测门的打开、关闭来预防犯罪。 、具身智能系统与芯片 具身智能汇集了跨学科领域的技术。是为一台进行AI运算的计算机提供了有形或可见的形式,即机上感知器和执行器。 具身
    发表于 09-18 11:45

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI的科学应用

    主要步骤: ①溯因②假说③实验 1、科学推理的类型 ①演绎②归纳 2、自动化科学发现框架 AI-笛卡儿-----自动化科学发现框架,利用数据和知识来生成和评估候选的科学假说。 4项规则:、直觉
    发表于 09-17 11:45

    AI芯片:科技探索与AGI愿景》—— 勾勒计算未来的战略罗盘

    如果说算力是AGI的“燃料”,那么AI芯片就是制造燃料的“精炼厂”。本书的卓越之处在于,它超越了单纯的技术拆解,成功绘制了一幅从专用智能迈向通用智能的“战略路线图”。作者以芯片为棱镜,折射出算法
    发表于 09-17 09:32

    AI芯片:科技探索与AGI愿景》—— 深入硬件核心的AGI指南

    。 (图1:多种AI芯片架构的对比剖析示意图) 尤为可贵的是,本书并未沦为冰冷的技术手册。作者始终将芯片的演进置于AGI发展的宏大叙事中,深刻论证了“没有专属硬件,AGI只是空
    发表于 09-17 09:29

    【「AI芯片:科技探索与AGI愿景」阅读体验】+半导体芯片产业的前沿技术

    半导体芯片是现在世界的石油,它们推动了经历、国防和整个科技行业。-------------帕特里克-基辛格。 AI的核心是一系列最先进的半导体芯片。那么AI芯片最新技术以及创新有哪些呢。 本章节作者
    发表于 09-15 14:50

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片的需求和挑战

    当今社会,AI已经发展很迅速了,但是你了解AI的发展历程吗?本章作者将为我们打开AI的发展历程以及需求和挑战的面纱。 从2017年开始生成式AI开创了新的时代,经历了
    发表于 09-12 16:07

    【「AI芯片:科技探索与AGI愿景」阅读体验】+可期之变:从AI硬件到AI湿件

    的不同。随着AI热潮的兴起,大脑的抽象模型已被提炼成各种的AI算法,并使用半导体芯片技术加以实现。 而大脑是一个由无数神经元通过突触连接而成的复杂网络,是极其复杂和精密的。大脑在本质上就是一台湿润的软组织
    发表于 09-06 19:12

    【「AI芯片:科技探索与AGI愿景」阅读体验】+内容总览

    AI芯片:科技探索与AGI愿景》这本书是张臣雄所著,由人民邮电出版社出版,它与《AI芯片:前沿技术与创新未来》一书是姊妹篇,由此可见作者在AI
    发表于 09-05 15:10

    【书籍评测活动NO.64】AI芯片,从过去走向未来:《AI芯片:科技探索与AGI愿景》

    和管理人员、创投从业者以及相关专业学生等,都可以从这两本书中把握AI芯片的技术动向,为产业落地提供关键洞察。 立足当下,洞察趋势,《AI芯片:科技探索与
    发表于 07-28 13:54

    电子入选2024年度无锡市雏鹰企业培育库

    近日,无锡市科技局公布了《2024 年度无锡市雏鹰、瞪羚、准独角兽企业培育拟入库企业名单公示》,无锡飞电子信息技术有限公司凭借在CAE/EDA软件领域的卓越创新表现与发展潜力,成功入选无锡市
    的头像 发表于 07-18 16:24 644次阅读

    【「零基础开发AI Agent」阅读体验】+ 入门篇学习

    很高兴又有机会学习ai技术,这次试读的是「零基础开发AI Agent」,作者叶涛、管锴、张心雨。 大模型的普及是近年来的一件大事,万物皆可大模型已成为
    发表于 05-02 09:26

    年营收超9亿!这家AI巨头将靠AGI逆袭,医疗AI成新战场

    IPO。来到2025年,云知声的上市之旅终于迎来新的进展。 自2012 年成立至今,云知声已经不再是一家简单的AI公司。云知声在招股书中提到公司定位时表示,“我们是中国AGI技术的先行者,在通向
    的头像 发表于 04-07 08:31 2445次阅读
    年营收超9亿!这家<b class='flag-5'>AI</b>巨头将靠<b class='flag-5'>AGI</b>逆袭,医疗<b class='flag-5'>AI</b>成新战场

    2024AI编程技术与工具发展总结

    最近,开源中国 OSCHINA、Gitee 与 Gitee AI  联合发布了《2024 中国开源开发者报告》 。 报告聚焦 AI 大模型领域,对过去一年的技术演进动态、
    的头像 发表于 02-13 09:11 1479次阅读
    <b class='flag-5'>2024</b>年<b class='flag-5'>AI</b>编程<b class='flag-5'>技术</b>与工具发展总结

    苹芯科技亮相2024中国AI芯片开发者论坛

    近日,苹芯科技CTO章尧君受邀出席了2024中国AI芯片开发者论坛,并发表了题为《存算一体技术的内核与应用进阶》的主题演讲。此次论坛汇聚了众多AI芯片领域的专家学者和行业精英,共同探讨
    的头像 发表于 12-10 16:21 813次阅读