0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

重磅!大象机器人发布第二代人工智能套装

大象机器人科技 来源:大象机器人科技 作者:大象机器人科技 2023-02-03 17:19 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

2023 年1月18日,工业和信息化部、教育部等十七部门印发《“机器人+”应用行动实施方案》(以下简称《方案》)。

《方案》提出,研制交互、教学、竞赛等教育机器人产品及编程系统,分类建设机器人服务平台。加大机器人教育引导,完善各级院校机器人教学内容和实践环境,针对教学、实训、竞赛等场景开发更多功能和配套课程内容。强化机器人工程相关专业建设,提升实验机器人产品及平台水平,加强规范管理。推进5G人工智能、智能语音、机器视觉、大数据、数字孪生等技术与机器人技术融合应用,积极培育机器人校园服务新模式和新形态,深化机器人在教学科研、技能培训、校园安全等场景应用。

poYBAGPc0buAbb0tAAEIaL3FzqA095.jpg

为响应国家大力发展新工科的号召,为高职、本科等院校的机器人与人工智能相关专业的学习和教育提供全面、良好的条件,大象机器人推出了一套基于视觉识别+机械臂的整体解决方案-人工智能套装 2023版,实现从识别到分拣的全自动化作业,并期望最终携手用户一起打造产学研的闭环,形成高质量的新工科人才培养体系,助力国家科技教育的向前发展!

pYYBAGPc0byASRKQAAEtBMXVwBY191.jpg

poYBAGPc0b2AAT0XAADI6mqS8aQ817.jpg

在已部署数千套第一代人工智能套装后,历经2年研发,人工智能套装 2023版 全新升级,

●5大视觉识别算法

●6种适配机械臂

●7大硬件升级

● 8大机器人学习点!

并支持可视化软件,是定位抓取、自动分拣模块为一体的入门级人工智能套装。基于python平台,可通过开发软件实现机械臂的控制,简单易学,能够快速入门学习人工智能基础知识,启发创新思维,领悟开源创意文化。

本套装扩展性好,开放性高,可以被用于多种用途。可易用高校实训平台、机器人学科搭建、机器人实验室或个人学习与使用。

2023

产品特点

01五大视觉识别算法

机器视觉是用机器来代替人眼进行目标对象识别、判断和测量的技术。机器视觉通过计算机模拟人的视觉功能,主要技术涉及目标图像获取技术、图像信息处理技术、目标对象测量与识别技术。典型机器视觉系统主要由视觉感知单元、图像信息处理与识别单元、处理结果显示单元和视觉系统控制单元组成。

pYYBAGPc0b2ATwDVAAFqTwmIRCs797.jpg

1

颜色识别

颜色识别能力可以对输入图片的颜色信息进行分析,输出颜色值(RGB形式和HEX格式)与对应的占比信息。

poYBAGPc0b6AC-HHAABsqqte6ao981.jpg

人工智能套装 2023版使用eye-to-hand的模式,使用摄像头,通过OpenCV进行颜色定位,并将符合情况的颜色物块框出,通过相关点位计算出物块相对于机械臂的空间坐标位置。为机械臂设置一套相关动作,根据识别的物块颜色不同放置不同的物料框中。

2形状识别

物体的形状识别是模式识别的重要方向,在计算机中物体的形状有多种表示方式,基于不同的形状表示方式,提出了多种形状识别方法,如基于傅里叶描述子、主分量分析、不变性距等方法。在形状识别中,识别所基于的模式特征非常重要。

pYYBAGPc0b6AJ7sMAABqkUF2xWc285.jpg

形状识别的一般流程:形状提取、形状特征提取和分类识别。

3、特征点识别

FAST角点检测,通过考察像素点与周围领域内的16个像素点的差异来确定特征点,并且通过分割测试算法对检测效率做了极大的提升。

poYBAGPc0b-Abt9DAACq2Z2FNzg405.jpg

图像特征点带你学习图像分割、保存图片特征。

pYYBAGPc0b-AMelHAABIQiFne7E022.jpg

4、yolov5识别

传统的目标检测系统利用分类器来执行检测。为了检测对象,这些系统在测试图片的不同位置不同尺寸大小采用分类器对其进行评估。如目标检测系统采用deformable parts models (DPM)方法,通过滑动框方法提出目标区域,然后采用分类器来实现识别。近期的R-CNN类方法采用region proposal methods,首先生成潜在的bounding boxes,然后采用分类器识别这些bounding boxes区域。最后通过post-processing来去除重复bounding boxes来进行优化。这类方法流程复杂,存在速度慢和训练困难的问题。

poYBAGPc0cCAWaTJAABhDXu0Diw559.jpg

我们将目标检测问题转换为直接从图像中提取bounding boxes和类别概率的单个回归问题,只需一眼(you only look once,YOLO)即可检测目标类别和位置。

pYYBAGPc0cCAIHogAABknsmWhwU946.jpg

5、AR二维码识别

在特征提取模块中,我们使用纹理特征提取算法从原始输入图像中提取出多分辨率直方图特征、局部二值模式特征和边缘方向直方图特征,这三种纹理特征的表达形式均为一维数组。我们将这 3 个数组连接为 1 个一维数组,作为后续分类模块的输入。

poYBAGPc0cGAZ9AUAABeeyJOAXs328.jpg

四种ID二维码识别学习二维和三维世界之间的投影关系。

02、高精度相机

提供完整的视觉硬件设备,相机能够实时的“看到”工件所处的位置以及姿态,自动判断得到下一个抓取的工件信息。机械臂系统根据相机的分析结果,自动规划路径并同时避开障碍物实现对工件的抓取。

pYYBAGPc0cGAedqvAAAvZRS8nKo156.jpg

支持相机光源调整,对反光、暗色等金属件,紧密贴合或随意摆放物件均可有效识别相机点云成像细腻,抓取精度高,引导精准,高效准确的完成引导操作,抓取精度可到0.5mm。

03 六种适配机械臂

适配6种桌面级小型机械臂-M5Stack和树莓派版本,采用高度集成的伺服单元,在融合机械臂的基础原理的同时,精简结构设计,方便进行课程教学。

poYBAGPc0cKAMQkuAAE_LFI7Kes844.jpg

poYBAGPc0cOAER3cAAFhkUog-7k225.jpg

pYYBAGPc0cSAOddtAAEdXB9DegU446.jpg

(M5版本和树莓派版本)

04、可视化软件

支持可视化软件操作,可以选择对应视觉算法,全自动识别抓取放置,方便观看效果展示,并且支持分步运行,可以只识别、只抓取、只放置,让用户理解每一过程原理。同时,可以通过图形化的方式,实时显示坐标信息,物体定位坐标与机械臂实时坐标;显示物体识别信息,比如形状识别三角形,会显示形状为三角形。

poYBAGPc0cSAejJNAAA2Us7Cgig706.jpg

总而言之,帮助用户实现所有可监测信息的图形化显示,用户也可以在软件控制界面下,修改XY坐标,完成精准抓取。

05、开源软件系统ROS

软件系统基于开源机器人操作系统ROS进行架构设计,方便利用各种人工智能开源资源,开发如视觉抓取、3D感知场景规划等智能化应用。

pYYBAGPc0cWADJAcAAA3m3obRQU685.jpg

2023

机械臂视觉抓取过程

01、手眼标定

手眼标定即相机内参和外参的标定,用于矫正图像和后续数据推算。内参即与相机安装位置无关的本身硬件参数(如焦距、像素大小等),内参标定功能包为 camera-calibration ;外参即相机在世界坐标系中的参数(如相机的位置、旋转方向等),外参标定的功能包easy_handeye 。

poYBAGPc0caAZY9rAAB1BNdB7dY651.jpg

02、实现物体识别与定位

视觉抓取的第一步自然是对于目标物体的识别和定位,目前可以借助开源视觉库Opencv的内置库以及ROS开源包进行实现。不论是通过二维图像的深度信息或是物体的颜色形状 还是三维点云的识别分析,相机需要传回目标物体在世界坐标系中的位置和姿态。

pYYBAGPc0caASZe-AAA3mfKqk_U912.jpg

对于物体的识别分析,后续可以进一步采用机器学习 / 深度学习的方法。

03、计算位置坐标

计算位置坐标,需要根据上一步相机返回物体的像素中心点坐标,再根据抓取区域中心点相对于机械臂坐标和可识别物体相对与机械臂的坐标,以及两个aruco二维码的相关距离数值,推算出机械臂抓抓取物体的坐标。

poYBAGPc0ceAUde9AACGehBUST8357.jpg

4.运动规划

机械臂的运动规划(这里包括路径规划)属于上层算法内容,是机械臂算法的研究重点。

pYYBAGPc0ceARg6LAAA9k_WDyy4014.jpg

插件Movelt!为我们提供了一个易于使用的集成化开发平台。它由一系列移动操作的功能包组成,包括运动规划、操作控制、3D感知、运动学、动力学、控制与导航算法等。我们可以通过 Moveit! 提供的的编程接口来进行机械臂的运动规划控制,根据第三步中的目标姿态,得到一个可达路径。

2023

完整配套

针对实验教学和实践教学,完整配套系列教材、实训指导书等,轻松开展教与学活动。

pYYBAGPc0ciAAkxJAADI6mqS8aQ493.jpg

01 八大学习点

视觉教育套装你能学到什么?

OpenCV

Python编程

ROS学习

逆运动学

手眼标定

机器视觉

末端执行器使用

AI机器视觉

机器人控制原理

末端执行器使用

poYBAGPc0cmABYqdAACfwCJnC6s159.jpg

02 课程大纲

pYYBAGPc0cmARCdmAAFjan5uj9c502.jpg

2023

套装组件

poYBAGPc0cqAPe5aAACgjxQrOeM359.jpg

(点击放大查看)

2023

产品参数

名称 :人工智能套装 2023版

整体尺寸:500X400X405mm

识别速度:颜色/形状/二维码:300ms特征点:600ms

识别精度:3mm

摄像头名称:USB无畸变摄像头

图像像素:2M 1080p

支持图像格式:MJPG/YUY2

像元尺寸:3.0umx3.0um

最高帧率:MJPG:1920*1080@30fpsYUV:1920*1080@30fps

USB 协议:标准 UVC 协议

电源供应:DC5V 90mA

视场角度:110°无畸变

镜头焦距:2.8mm

支持的系统:Windows XP/7/8/10/VISTA/SEVEN/MAC、LINUX(include uvc)/树莓派/Android 4.2+

2023

应用案例

适用于中高职、及应用型本科,面向人工智能、机器人工程、自动化等相关专业的实验实训教学使用。

1.某两所中等职业学校-人工智能实训项目

pYYBAGPc0cqAYo9HAAF3S7WYXyk631.jpg

2.某中学人工智能项目

pYYBAGPc0cuAAdIMAACeMR3SVeM155.jpg



审核编辑黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    214

    文章

    31672

    浏览量

    224595
  • 机器视觉
    +关注

    关注

    166

    文章

    4854

    浏览量

    126782
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    大象机器人正式发布myAGV Plus新一移动机器人平台

    恰逢教育部等五部门联合发布《“人工智能+教育”行动计划》,推动人工智能人才培养体系全学段重构的关键节点,大象机器人正式
    的头像 发表于 05-08 15:39 244次阅读

    普渡机器人正式发布全新一代人机器人PUDU D9

    普渡机器人正式发布全新一代人机器人 PUDU D9。作为普渡具身智能体系的最新成果,全新一P
    的头像 发表于 05-07 15:40 229次阅读

    RZ/G 系列第二代产品:性能强劲的多功能芯片解决方案

    /G2M、RZ/G2N 和 RZ/G2E,凭借其卓越的性能和丰富的功能,成为众多电子工程师的理想选择。下面我们就来详细了解一下这些产品的特点和优势。 文件下载: rzg2.pdf 产品概述 RZ/G 系列第二代产品旨在满足各种应用场景的需求,从工业自动化到智能家电,从汽车
    的头像 发表于 04-01 11:35 538次阅读

    信号干扰、轨迹漂移成过去式?第二代UWB技术在复杂工况下的硬核突围

    四相科技第二代UWB通过物理层协议和信号频段的优化,实现了测距、功耗与安全性的全面升级,致力于为复杂工业环境提供更精准稳定、更具“确定性”价值的解决方案。随着技术生态的持续完善与应用场景的不断拓展,第二代UWB的性能与成本优势将愈发显著,成为高精度定位领域不可或缺的关键基
    的头像 发表于 03-13 16:55 1455次阅读
    信号干扰、轨迹漂移成过去式?<b class='flag-5'>第二代</b>UWB技术在复杂工况下的硬核突围

    比亚迪正式发布第二代刀片电池及闪充技术

    发布会现场,王传福还宣布:所有搭载第二代刀片电池的闪充车车主,均享有重磅“闪充权益”,自交车之日起,在全国闪充站可享受1年的免费闪充权益,让闪充体验更畅快。并且,在闪充免费期结束后,也会同行业保持一致,不会额外收费。
    的头像 发表于 03-06 14:04 776次阅读

    第二代AMD Kintex UltraScale+ FPGA的亮点

    第二代 AMD Kintex UltraScale+ FPGA 可有效赋能专业音视频、广播、医疗、机器视觉、机器人技术及测试测量等领域的开发者,助力其打造兼具卓越性能和可靠性的强大系统,即使是面对
    的头像 发表于 03-03 11:32 2995次阅读
    <b class='flag-5'>第二代</b>AMD Kintex UltraScale+ FPGA的亮点

    新品 | CoolSiC™ MOSFET 650V第二代产品,新增75mΩ型号

    新品CoolSiCMOSFET650V第二代产品,新增75mΩ型号CoolSiCMOSFET650V第二代器件基于性能卓越的第一沟槽SiCMOSFET技术打造,通过提升性能、增强设计灵活性及鲁棒性
    的头像 发表于 01-12 17:03 624次阅读
    新品 | CoolSiC™ MOSFET 650V<b class='flag-5'>第二代</b>产品,新增75mΩ型号

    新品 | CoolSiC™ MOSFET 400V与440V第二代器件

    新品CoolSiCMOSFET400V与440V第二代器件CoolSiCMOSFET400V与440V第二代器件兼具高鲁棒性、超低开关损耗与低通态电阻等优势,同时有助于优化系统成本。该系列400V
    的头像 发表于 12-31 09:05 898次阅读
    新品 | CoolSiC™ MOSFET 400V与440V<b class='flag-5'>第二代</b>器件

    TeledyneLeCroy发布第二代DisplayPort 2.1 PHY合规测试与调试解决方案

    TeledyneLeCoy(Teledyne子公司)宣布第二代QualiPHY 2自动化合规测试框架现已支持DisplayPort 2.1物理层(PHY)合规性测试。
    的头像 发表于 12-26 11:04 1906次阅读

    新品 | 采用.XT扩散焊和第二代1200V SiC MOSFET的Easy C系列

    新品采用.XT扩散焊和第二代1200VSiCMOSFET的EasyC系列EasyPACK2C1200V8mΩ三电平模块、EasyPACK2C1200V8mΩ四单元模块以及
    的头像 发表于 11-24 17:05 1792次阅读
    新品 | 采用.XT扩散焊和<b class='flag-5'>第二代</b>1200V SiC MOSFET的Easy C系列

    新品 | 第二代CoolSiC™ MOSFET 1200V Q-DPAK封装分立器件产品扩展

    新品第二代CoolSiCMOSFET1200VQ-DPAK封装分立器件产品扩展CoolSiC1200VMOSFET(顶部散热Q-DPAK单管封装)专为工业应用设计,适用于电动汽车充电、光伏
    的头像 发表于 08-11 17:04 1558次阅读
    新品 | <b class='flag-5'>第二代</b>CoolSiC™ MOSFET 1200V Q-DPAK封装分立器件产品扩展

    机器人消息:智元机器人获富临精工数千万元订单 越疆发布二代人机器人平台

    机器人的落地场景正全面铺开、灵活易用、部署快速的机器人,可快速适配各行业领域不同应用场景,是企业降本增效,以低成本快速获得高回报的理想选择。根据瑞银发布的人形机器人行业报告数据显示,瑞
    的头像 发表于 08-11 16:19 1619次阅读

    新品 | 第二代CoolSiC™ MOSFET G2 750V - 工业级与车规级碳化硅功率器件

    新品第二代CoolSiCMOSFETG2750V-工业级与车规级碳化硅功率器件第二代750VCoolSiCMOSFET凭借成熟的栅极氧化层技术,在抗寄生导通方面展现出业界领先的可靠性。该器件在图腾柱
    的头像 发表于 07-28 17:06 1235次阅读
    新品 | <b class='flag-5'>第二代</b>CoolSiC™ MOSFET G2 750V - 工业级与车规级碳化硅功率器件

    埃斯顿酷卓发布第二代人机器人CODROID 02

    近日,埃斯顿酷卓科技正式发布第二代人机器人CODROID 02。CODROID 02实现全身关节运动能力升级,显著提升复杂场景适应性与灵活性,标志着国产人形机器人技术迈入新阶段。
    的头像 发表于 06-16 16:06 2129次阅读

    AMD第二代Versal AI Edge和Versal Prime系列加速量产 为嵌入式系统实现单芯片智能

    我们推出了 AMD 第二代 Versal AI Edge 系列和第二代 Versal Prime 系列,这两款产品是对 Versal 产品组合的扩展,可为嵌入式系统实现单芯片智能
    的头像 发表于 06-11 09:59 2191次阅读