0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何将OpenAI研发的ChatGPT扩展到机器人领域

bzdlyqxsl 来源:机器人大讲堂 2023-05-11 09:49 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

头部AI大公司均在尝试以大模型为机器人注入灵魂。

微软团队正探索如何将 OpenAI研发的ChatGPT扩展到机器人领域,旨在让人类用自然语言控制如机械臂、无人机、家庭辅助机器人等多个平台。3月23日,OpenAI还领投了挪威人形机器人公司1X。

3月8日,谷歌和柏林工业大学的团队重磅推出了史上最大的视觉语言模型——PaLM-E,同时谷歌表示,计划探索PaLM-E在现实世界场景中的更多应用,例如家庭自动化或工业机器人,希望PaLM-E能够激发更多关于多模态推理和具身AI的研究。

据了解,阿里云工程师也正在实验将千问大模型接入工业机器人,以便实现远程指挥机器人工作。在近日举行的第六届数字中国建设峰会上,阿里云发布的一个演示视频中展示了千问大模型的实际应用场景。

916a8314-ef60-11ed-90ce-dac502259ad0.gif

“我渴了,找点东西喝吧。”工程师通过钉钉对话框向机器人发出指令后,千问大模型回答,“好的,我找找有什么喝的。”随后,千问大模型在后台自动编写了一组代码发给机器人,机器人开始识别周边环境,从附近的桌上找到一瓶水,并自动完成移动、抓取、配送等一系列动作,递送给工程师。

科幻电影中机器人和人交互的画面正在变成现实。

▍技术能力解析

从技术原理上来理解,这意味着千问大模型首先理解了人类这句话的内容,然后在后台自动编写一组代码发给机器人,机器人则完成识别周边环境、找水至配送等一系列动作。

在钉钉对话框输入一句人类语言即可指挥机器人工作,这将为工业机器人的开发和应用带来革命性的变化。其背后意味着大模型为工业机器人的开发打开了新的大门。因为千问等大模型为机器人提供了推理决策的能力,从而有望让机器人的灵活性和智能性大幅提升。

92bcaaa8-ef60-11ed-90ce-dac502259ad0.gif

阿里云工程师表示,这种能力意味着新的变革。机器人之前能够完成一些人类设置的固定任务,但并不能执行一些需要“随机应变”的任务,“AI大模型突破了机器人的局限,让人类可以通过自然语言指挥机器完成负责任务,让机器人真有了大脑。”

可以说大模型的诞生为工业机器人打开了一扇新的窗,据阿里云工程师介绍,例如在生产运行时,一线工程师只需发送一段文字,千问就能理解其意图进行任务推理,并自动翻译成机器可以理解的代码,指挥机器执行任务,有效提升生产效率。

阿里巴巴董事会主席兼 CEO、阿里云智能 CEO 张勇表示,数字化是基础,智能化是方向,当前的人工智能浪潮是和 20 年前的数字化浪潮同等重要的机会,行业正处于智能化时代的历史新起点。阿里正朝着这个方向快速迈进。

“就像数字化时代出现一批数字原生企业,智能化时代也必将出现一系列智能原生企业。我们深刻感受到,‘所有不可想象,终将化为寻常’。”他说。

目前,人们依然严重依赖代码来实现对机器人的控制,人类操作机器人需要学习复杂的编程语言或机器人系统的细节,而GPT等大模型的出现,为推翻竖立在人类与AI面前的“巴别塔”提供了新思路,即将多模态的大语言模型作为人类与机器人沟通的桥梁。

正如阿里云工程师所说,“AI大模型突破了机器人的局限,让人类可以通过自然语言指挥机器完成负责任务,让机器人真正有了大脑。”

9468d714-ef60-11ed-90ce-dac502259ad0.gif

张勇也表示,由于实体经济是智能化主战场,新的AI大模型让千行百业将被重新定义。“AI大模型将以更低门槛、更高效率,打通一个个数据断流节点,推动数据在研发、生产、配送、服务等环节畅通流动,服务实体经济的智能化升级。”

当然,大模型对机器人领域的加持不仅体现在应用环节,也可参与开发环节。

面向制造领域,阿里云将进一步融合千问大模型与阿里云物联网平台能力,为企业提供智能解决方案,让生产制造全流程变得更智能、更高效。

据阿里云工程师介绍,在机器人开发阶段,工程师可通过千问大模型自动生成代码指令完成机器人功能的开发与调试,甚至还能为机器人创造一些全新的功能。

日前,阿里云已宣布启动“通义千问伙伴计划”,将优先为千问伙伴提供大模型领域的技术、服务与产品支持,共同推动大模型在不同行业的应用,已有超20万企业用户申请接入千问测试。

959f6940-ef60-11ed-90ce-dac502259ad0.png

▍难点和未来

不过,大模型只是提供了一种新思路,距离能听懂“人话”的机器人面世,或许还有很长的路要走。

因为语言模型固然可以为机器人提供更好的步骤规划评估和选择,但并不能面面俱到,比如不能告诉机器人打开冰箱时应施加多大的力。因此,我们发现全世界包括谷歌在内的巨头也暂时没有将装上大模型的机器人商业化的计划。

但制造业是AI大模型的重要应用场景之一,未来的机遇在于云、AI与物理世界机器的融合,AI大模型必然能为工业机器人、服务机器人的智能化发展带来了新的机遇和挑战,而这也将推动实体经济向更加智能化的方向发展。

为此,除了阿里外,国内多家互联网巨头也在AI+机器人领域动作频频。

4月25日,据腾讯Robotics X实验室公布最新机器人研究进展,首次展示在灵巧操作领域的成果,推出自研机器人灵巧手“TRX-Hand”和机械臂“TRX-Arm”。

4月24日,据企查查APP显示,近日北京小米机器人技术有限公司成立,注册资本5000万元人民币。经营范围包含:智能机器人的研发;人工智能行业应用系统集成服务;人工智能基础资源与技术平台;微特电机及组件制造等。资料显示,小米在国内机器人布局版图不断扩大,从CyberDog(仿生机器狗),再到Cyberone(仿生机器人),持续加注在机器人领域的研发和创新。

而国内2022年受益于汽车动力 电池、光伏等新能源行业的发展机遇,随着今年工业机器人行业景气度继续提升,多家机器人企业也在开辟自己的新方向,例如通过机器视觉传感器等相关技术的发展及与工业机器人深度结合,促进工业机器人的可用性和易用性。

根据国家统计局统计,2015—2022年我国工业机器人产量由3.30万台增长至44.31 万台,CAGR达44.92%,2023年1-3月工业机器人累计产量10.37万台,同比-3.00%,工业机器人行业正步入窗口期。多家企业收入实现快速增长,但盈利能力需要进一步改善。

从发展方向上看,随着工业机器人应用门槛的下降,工业机器人的应用已经不再局限于对负载、响应性、一致性要求较高的行业,AI的发展更是已经推动了机器人企业软硬件迭代加速。未来工业机器人的发展以提升应用广度和深度为方向,其中运动控制技术、控制系统技术促进产品性能提升,AI相关技术促进智能化提升,未来工业机器人会向着智能化、精细化方向努力,另一部分硬件制造、集成新技术则推动工业机器人赋能多行业进一步深化。

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    90

    文章

    38346

    浏览量

    297457
  • 智能化
    +关注

    关注

    15

    文章

    5212

    浏览量

    59781
  • 工业机器人
    +关注

    关注

    91

    文章

    3509

    浏览量

    97430

原文标题:为机器人注入灵魂?阿里“千问”大模型带来了哪些新动向?

文章出处:【微信号:信息与电子工程前沿FITEE,微信公众号:信息与电子工程前沿FITEE】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    探索RISC-V在机器人领域的潜力

    探索RISC-V在机器人领域的潜力 测评:洄溯 测评时间: 2025年11月 测评对象: MUSE Pi Pro开发板(基于进迭时空K1系列高性能RISC-V CPU) 一、 开篇引言
    发表于 12-03 14:40

    RK3576机器人核心:三屏异显+八路摄像头,重塑机器人交互与感知

    瑞芯微RK3576 AIoT处理器处理器凭借其卓越的多屏异显与8路摄像头接入能力,为机器人领域带来革新。米尔电子MYD-LR3576开发板实测数据显示,在高负载下CPU占用仅34%,完美实现多路视觉
    发表于 10-29 16:41

    机器人竞技幕后:磁传感器芯片激活 “精准感知力”

    故障率从 15% 降至 3% 以下。随着磁隧道结 (MTJ) 等新型技术成熟,下一代磁传感器有望实现纳米级精度、皮秒级响应速度,或使机器人 “高速竞速” 最高速度提升 40%;柔性磁传感器研发
    发表于 08-26 10:02

    工业机器人的特点

    的基础,也是三者的实现终端,智能制造装备产业包括高档数控机床、工业机器人、自动化成套生产线、精密仪器仪表、智能传感器、汽车自动化焊接线、柔性自动化生产线、智能农机、3D 打印机等领域。而智能制造装备中工业
    发表于 07-26 11:22

    明远智睿SSD2351开发板:语音机器人领域的变革力量

    在人工智能快速发展的今天,语音机器人逐渐成为人们生活和工作中的得力助手。明远智睿SSD2351开发板凭借强大性能与丰富功能,为语音机器人的发展注入新动力,成为该领域的变革力量。 SSD2351开发板
    发表于 05-28 11:36

    盘点#机器人开发平台

    地瓜机器人RDK X5开发套件地瓜机器人RDK X5开发套件产品介绍 旭日5芯片10TOPs算力-电子发烧友网机器人开发套件 Kria KR260机器人开发套件 Kria KR260-
    发表于 05-13 15:02

    【「# ROS 2智能机器人开发实践」阅读体验】机器人入门的引路书

    ROS的全称:Robot Operating System 机器人操作系统 ROS的 目的 :ROS支持通用库,是通信总线,协调多个传感器 为了解决机器人里各厂商模块不通用的问题,让机器人快速开发
    发表于 04-30 01:05

    FMEA:手术机器人研发的黄金法则!

    在现代医疗领域,手术机器人正逐步成为提升医疗精准度与效率的关键技术。随着技术不断进步,手术机器人研发也面临着前所未有的挑战和压力。在这一过程中,确保产品的质量和安全性成为了
    的头像 发表于 02-08 17:13 664次阅读
    FMEA:手术<b class='flag-5'>机器人</b><b class='flag-5'>研发</b>的黄金法则!

    OpenAI自研传感器,打造未来智能机器人

    。 据了解,Caitlin Kalinowski在去年11月从Meta跳槽至OpenAI,并带来了丰富的硬件开发经验。她领导的新成立的机器人团队,正致力于设计能够在复杂环境中执行多样化任务的通用型机器人。为了实现这一目标,
    的头像 发表于 01-14 10:05 889次阅读

    【「具身智能机器人系统」阅读体验】2.具身智能机器人大模型

    、医疗、服务等领域的应用前景更加广阔,也使得人类能够更轻松地借助机器完成复杂工作。我深刻认识,大模型技术正在从根本上改变我们对机器人能力的认知。它们不仅是一种技术工具,更是推动具身智
    发表于 12-29 23:04

    【「具身智能机器人系统」阅读体验】1.初步理解具身智能

    影响与发展,提供了全球及国内行业趋势的见解。书中详细讨论了这一新兴领域面临的诸多挑战,从应用的不确定性、昂贵的成本伦理问题,为读者呈现了当前形势的现实视角。 接下来,书中深入探讨了具身智能机器人的历史
    发表于 12-28 21:12

    OpenAI探索人形机器人开发

    据报道,OpenAI近年来对机器人技术重新燃起了浓厚的兴趣。在过去的一年中,该公司积极投资于机器人硬件和软件领域的初创公司,如Figure和Physical Intelligence,
    的头像 发表于 12-26 10:27 854次阅读

    《具身智能机器人系统》第7-9章阅读心得之具身智能机器人与大模型

    研读《具身智能机器人系统》第7-9章,我被书中对大模型与机器人技术融合的深入分析所吸引。第7章详细阐述了ChatGPT for Robotics的核心技术创新:它摒弃了传统的分层控制架构,创造性地
    发表于 12-24 15:03

    【「具身智能机器人系统」阅读体验】+数据在具身人工智能中的价值

    嵌入式人工智能(EAI)人工智能集成机器人等物理实体中,使它们能够感知、学习环境并与之动态交互。这种能力使此类机器人能够在人类社会中有效地提供商品及服务。 数据是一种货币化工具 数
    发表于 12-24 00:33

    《具身智能机器人系统》第1-6章阅读心得之具身智能机器人系统背景知识与基础模块

    Intelligence)这一概念有了深入理解。本书开篇和大部分书籍文章一样,都是立足宏观角度,先把视角引申世界经济形势。书中阐述具身智能机器人有望成为继计算机、智能手机后的新一代颠覆性产品。2005-2010年
    发表于 12-19 22:26