0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

ChatGPT已能操控机器人,工程师连代码都不用写

天津机器人 来源:天津机器人 2023-03-28 11:31 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

当我还在跟ChatGPT吹牛尬聊时,有人已经在拿它操控机器人了。 不是别人,正是 OpenAI 的金主爸爸、不久前刚拿 ChatGPT“重新发明搜索引擎”的微软。

ba7ce17e-ccde-11ed-bfe3-dac502259ad0.png

到目前为止,开发者调教机器人不仅技术门槛高,还道阻且长: 工程师需要在工作流程回路中,不断手写新代码和规范来纠正机器人行为;另外,操控不同的机器人可能需要不同的编程语言和环境。

bacc9782-ccde-11ed-bfe3-dac502259ad0.png

而在 ChatGPT 的帮助下,工程师甚至不用手写代码 —— 直接用人话描述想做什么,AI 就能自动翻译成机器语言。

baf7ba0c-ccde-11ed-bfe3-dac502259ad0.png

这意味着,一方面专业人士与机器人的交互效率起飞;另一方面,技术门槛也降低一大截,外行人甚至也能参与调试,创造出更多使用方法。 举个简单的例子:让无人机自动检查货架。 首先,操作者只需用自然语言给 ChatGPT 提出要求;然后,AI 就能自动翻译成代码,并指挥无人机行动。(还可以规定无人机的飞行路径。)

bb3eebf2-ccde-11ed-bfe3-dac502259ad0.gif

难怪特斯拉前 AI 主管 Andrej Karpathy 会调侃:

bcffe5e0-ccde-11ed-bfe3-dac502259ad0.png

实际上,ChatGPT 会玩儿的花样可多了。 比如,一位操作者跟 AI 说:“我渴了,请帮我找个喝的。” 此时 AI 并不会直愣愣地就去找水了,而是会很机灵地反问:

bd2911fe-ccde-11ed-bfe3-dac502259ad0.png

当然操作者也不是吃素的,他并未直接告诉 AI 选哪个,而是说:“我刚从健身房回来,请帮我找个健康点儿的饮料。” 然后更神奇的操作就开始了: AI 先是猜测他想喝椰子水,然后自己噼里啪啦写出一段代码(甚至还有注释):

bd56b550-ccde-11ed-bfe3-dac502259ad0.gif

写完就自己指挥无人机去找椰子水:

bd7f5096-ccde-11ed-bfe3-dac502259ad0.gif

除了无人机,ChatGPT 还能轻松操控别的小机器人,包括摄像头、机械臂等等。 比如让摄像头在房间里找出能加热午饭的东西。

bfc80e56-ccde-11ed-bfe3-dac502259ad0.gif

还有指挥机械臂拼出一个微软的 Logo。(悄悄夹带私货)

c058d6c0-ccde-11ed-bfe3-dac502259ad0.gif

看到这些,有网友脑洞大开,有人发问:

c0db2ff8-ccde-11ed-bfe3-dac502259ad0.png

还有人甚至调侃称,AI 可能连发射核弹的指令都会写:

c0fe094c-ccde-11ed-bfe3-dac502259ad0.png

不过话说回来,其实离网友说的这些还差得远,毕竟现在还是需要人类参与的。 从前文可以看出,这只灵活的 AI 不仅与人交流畅通无阻,而且和机器也能快速沟通。 这主要得益于微软团队专门开发的一系列API和高级函数库。

c12a7298-ccde-11ed-bfe3-dac502259ad0.png

他们没有让 ChatGPT 背后的语言大模型(LLM),生成某固定种类的代码;因为机器人是个多元化领域,这样可能会在不同场景下涉及大量微调。 而在新颖的操作框架下,不同机器人,都有自己对应的特定函数库。 ——一个 AI,就能适应不同的对象、不同的任务。 一方面,这些函数库,能够连接到机器人控制系统中管理底层硬件,以及执行基本运动的代码和功能模块。 另一方面,为了让 ChatGPT 也能遵循函数库的规则,预定义函数命名就很关键。清晰的函数名,能让各 API 之间建立良好的功能连接,最终生成高质量的回答。 其中一项要求,就是所有 API 名称必须描述整体功能行为。例如,detect_object (object_name) 函数可以在内部链接到 OpenCV 函数或计算机视觉模型。 设计好库和 API 后,微软给 ChatGPT 编写了一个文本提示(prompt),描述目标任务,并明确说明函数库中哪些函数可用;另外,这还能规定 ChatGPT 生成代码用哪种编程语言。

c175d79c-ccde-11ed-bfe3-dac502259ad0.png

值得一提的是,AI 生成内容效果,和人为提示的质量呈正相关。为此,微软还开发了一个协作开源平台 PromptCraft,任何人都能在此分享不同类机器人的 Prompt 策略。

c1bfd798-ccde-11ed-bfe3-dac502259ad0.png

到此,幕后部署基本完成,然后用户就能通过“说人话”间接操控机器人了。 如果想要检查 AI 生成的代码是否有 Bug,随时都能在聊天框直接检查,或通过模拟器测试,人类可以用自然语言指导 AI 进行修正。 另外,还能到等到用户对解决方案满意为止,再在将 ChatGPT 生成代码部署到机器人上。 最后,如果是你,会想用 ChatGPT 操控机器人做些什么呢?

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    213

    文章

    31402

    浏览量

    223560
  • OpenAI
    +关注

    关注

    9

    文章

    1248

    浏览量

    10263
  • ChatGPT
    +关注

    关注

    31

    文章

    1599

    浏览量

    10390

原文标题:ChatGPT 已能操控机器人,工程师连代码都不用写

文章出处:【微信号:tjrobot,微信公众号:天津机器人】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    什么是BSP工程师

    。其中使板子正常稳定的工作的代码就属于板级支持包。 那么BSP工程师的具体工作有哪些呢? 我们首先从嵌入式设备谈起,前面我们谈到了很多的嵌入式设备,从系统角度来讲这些设备有些是跑操作系统的,有些没有跑
    发表于 01-13 06:54

    跨年早鸟福利!HPM关节伺服工程师集训营北京站要开课啦~

    随着全球机器人产业进入高速发展期,关节伺服系统作为机器人运动控制的核心中枢,其技术成熟度直接决定机器人的精准性、灵活性与可靠性。当前,具备核心研发能力的关节伺服工程师成为产业升级的关键
    的头像 发表于 12-29 10:33 367次阅读
    跨年早鸟福利!HPM关节伺服<b class='flag-5'>工程师</b>集训营北京站要开课啦~

    高精度机器人控制的核心——基于 MYD-LT536 开发板的精密运动控制方案

    ”应用提供了强大的硬件支撑。 五、结语 “高精度机器人控制”是智能制造时代的核心竞争力。 米尔 MYD-LT536 开发板凭借强大的计算能力、丰富的工业接口与成熟的系统生态,能够帮助工程师快速搭建高精度
    发表于 11-14 15:48

    RK3576机器人核心:三屏异显+八路摄像头,重塑机器人交互与感知

    。· 多路MIPI-CSI接口:原生支持接入多个摄像头,为构建多目视觉系统打下坚实基础,满足机器人全方位感知需求。 RK3576在机器人领域的核心应用场景特种作业与工程机器人· 应用领
    发表于 10-29 16:41

    小萝卜机器人的故事

    代替, LED, 有大佬感兴趣, 一起关注和讨论代码, 这个机器人知名度不高, 可是是机器人的原型, 如果开放接口, 定位和无线充电, 也不失为未来的礼物。 让我们为小萝卜工程师的,
    发表于 10-23 05:24

    硬件工程师的 “鄙视链” 新动向:代码的,凭啥瞧不起画图的?

    “  在海外硬件工程师的世界里,一场关于设计灵魂归属的“圣战”已悄然打响。一边是信奉“所见即所得”、手握鼠标精雕细琢的“画图派”;另一边,则是高举“代码即真理”、用键盘召唤电路的“码派”。这不
    的头像 发表于 08-06 11:21 3717次阅读
    硬件<b class='flag-5'>工程师</b>的 “鄙视链” 新动向:<b class='flag-5'>写</b><b class='flag-5'>代码</b>的,凭啥瞧不起画图的?

    工业机器人的特点

    的基础,也是三者的实现终端,智能制造装备产业包括高档数控机床、工业机器人、自动化成套生产线、精密仪器仪表、智能传感器、汽车自动化焊接线、柔性自动化生产线、智能农机、3D 打印机等领域。而智能制造装备中工业
    发表于 07-26 11:22

    人形机器人背后的“灵魂导师”:工程师示教的价值与富唯智能的实践

    示教不是对机器的妥协,而是对人机协同的深度赋能。正如训练吴广所言:“要把机器人当作伙伴”——工程师输入的不仅是数据,更是让机器理解物理世界
    的头像 发表于 07-05 16:15 846次阅读
    人形<b class='flag-5'>机器人</b>背后的“灵魂导师”:<b class='flag-5'>工程师</b>示教的价值与富唯智能的实践

    工业通信界的“月老”:CC\\-Link IE和DeviceNet如何牵起机器人的“红线”

    。 某机械制造企业就曾遇到过“通信尴尬”。新购入的工业机器人只支持CC-Link IE,而车间里的传感器、执行器等老设备还在用DeviceNet网关协议,导致“新老设备”各说各话。工程师引入协议转换方案后
    发表于 06-12 14:35

    机器人遇上“语言障碍”:CCLINKIE转Profinet的“破冰外挂”来啦\\!

    在汽车焊装车间的技术角,工程师小陈的笔记本记满了“跨协议难题”:当搭载Profinet的库卡机器人遇上CCLINKIE总线的三菱PLC,数据交互像隔着玻璃喊话——PLC发送的坐标指令要“绕地球半圈
    发表于 06-04 14:31

    STM32+Android实现的智能家政机器人电路代码论文及项目源码

    STM32+Android实现的智能家政机器人电路代码论文及项目部分截图:
    发表于 05-28 21:22

    灏存科技:通过穿戴传感器设备,隔空操控人形机器人

    运动神经中枢系统,通过穿戴传感器设备,操控机械臂灵巧手和小朋友握手,控制机器人拿放试管等动作,机器人的动作与人几乎同步。   工作人员介绍,公司主攻人形机器人运动神经中枢系统,通过控制
    的头像 发表于 05-19 05:50 7230次阅读

    盘点#机器人开发平台

    地瓜机器人RDK X5开发套件地瓜机器人RDK X5开发套件产品介绍 旭日5芯片10TOPs算力-电子发烧友网机器人开发套件 Kria KR260机器人开发套件 Kria KR260-
    发表于 05-13 15:02

    【「# ROS 2智能机器人开发实践」阅读体验】机器人入门的引路书

    ROS的全称:Robot Operating System 机器人操作系统 ROS的 目的 :ROS支持通用库,是通信总线,协调多个传感器 为了解决机器人里各厂商模块不通用的问题,让机器人快速开发
    发表于 04-30 01:05