0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

基于机智云AIoT开发平台的智能仓库设计

机智云 2022-05-24 18:14 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

智能仓库的设计通过分析传统仓库功能,以STM32为主控芯片,搭配使用各种传感器模块采集数据,通过ESP8266联网芯片将数据上传至机智云平台的网络服务器,实现了设备的实时数据采集和联网。本系统设计创新性引入机智云平台,让普通的设备变成物联网设备,可以有效提高仓库管理,通过人脸识别的检测方式和物品的自动分拣,提升仓库系统的安全性和自动化,并且支持手机app程序操控、显示屏触摸操控和语音声控3种操作方式。01系统整体结构设计智能仓库系统通过各类传感器采集实时信息,经由主控芯片进行数据处理后传送至联网芯片,通过和云端服务器之间的数据交互,实现系统的联网。系统分为三大模块:①数据采集:使用DTH11采集温湿度、烟雾传感器检测是否出现烟雾、舵机或热释电传感器检测门禁信息。②数据处理:使用STM32F429作为系统的主控芯片,通过串口与其他部分进行数据交互,实现系统的智能化。③数据上行与下发:主控芯片处理数据并执行相应操作,将数据上报至HMI显示屏,并通过Wi-Fi发送至机智云平台,平台在收到数据后进一步将数据发送至app。主控芯片在接收到操作指令后通过串口控制外设。系统整体结构如下所示:
0b5ed154-dabb-11ec-b80f-dac502259ad0.jpg仓库智能安防系统结构图0b949e42-dabb-11ec-b80f-dac502259ad0.png主控与显示部分设计STM32F429IGT6作为主控芯片用以处理各个模块传感器发送过来的数据,并通过相应的编程程序实现运算处理,有丰富的片上资源,能够支持使用固件库开发编程。该芯片接口多,可以连接许多外设,总共有8个串口,因此可以通过串口将不同的模块连接,实现多路的数据采集并集中处理。0bb6c10c-dabb-11ec-b80f-dac502259ad0.jpgSTM32F429IGT6主控芯片HMI串口屏设计的人机互动界面共7个页面,每个页面实现不同的功能,包括有解锁界面、系统界面、灯光界面、温湿度及空调界面、烟雾检测界面、图像识别界面、人脸识别界面。部分界面效果截图如图2所示。0b949e42-dabb-11ec-b80f-dac502259ad0.png物联网部分设计系统通过联网模块ESP8266接入机智云平台的服务器后,app实现2个功能:实时监测当前联网的各个模块的工作情况,观察系统实时收集并上报的数据;发送对应的指令至机智云平台,机智云平台在接收并处理完相应的指令之后再转发至联网模块,最后联网模块通过串口和系统进行通信,系统接收到指令之后控制外设执行相应的操作,以实现对系统的实时控制。0b949e42-dabb-11ec-b80f-dac502259ad0.png语音与图像处理设计 LD3320具有非特定人语音识别技术,是一颗稳定性强且识别精度较高的语音识别芯片。语音提示由MP3播放模块负责,该模块能读取TF卡中存储的音频文件,通过编码引脚的高低电平即可播放对应音频文件。 LD3320芯片使用OpenMv视频头进行脸部识别。颜色识别则是利用摄像头不断截取当前所拍摄的视频并从中寻出不同的色块,寻找到色块之后与程序所设置的颜色阈值进行比对从而判断其颜色。使用Haar算子实现人脸识别,使用LBP(Local Binary Pattern, 局部二值模式)算法实现不同人脸的分辨。串口屏显示界面图02系统测试

首次使用须进行配网操作,打开app点击添加设备的按钮,输入连接Wi-Fi网络的账号和密码后选择对应的Wi-Fi模块的类型,设备处在待连接状态。

打开系统让ESP8266进入Airlink模式,此时app会搜索当前可连接的设备,app将Wi-Fi账号和密码发送给ESP 8266,ESP 8266根据接收到的信息可自动连接至当前网络。连接成功后,app提示发现新设备,点击绑定当前设备,页面自动跳转至控制界面。 虚拟设备模拟测试 虚拟设备可模拟真实设备的数据上传,可用来测试手机app是否可以与机智云进行数据交互。app通过二维码和虚拟设备进行绑定,成功后在机智云官网开启虚拟设备,可以看到页面上的虚拟设备提示设备已上线,即成功连接上机智云服务器,也可以查询虚拟设备的通信日志。可通过app向虚拟设备发送数据,同时虚拟设备也可以将数据推送至app, 两者之间的数据传输记录都可以在页面中查看。实物设备真实测试1)显示屏功能测试HMI显示屏功能测试结果显示灯光界面工作稳定,点击3个开关可以稳定控制放置在不同地方的3盏灯,STM32接收到HMI显示屏的指令后将结果实时上报至机智云,灯光状态的改变也能实时反馈至app端。温、湿度及空调界面工作稳定,程序设定每隔50 ms采集一次数据。经测试,HMI显示屏在接收到温湿度数据后将其转换成曲线图的形式以显示变化趋势,同时在app端也可以查看到实时采集的温湿度信息。烟雾检测界面工作稳定,设定每隔500 ms烟雾传感器检测一次当前的空气状况。点燃一根火柴,烟雾传感器下方的指示灯亮起说明检测到烟雾,排气扇自动打开,播放语音警报,此时显示屏上显示检测到的烟雾数值及排气扇的工作状态。待烟雾散去后系统自动关闭。图像识别界面工作稳定,点击人脸识别图标进入人脸识别界面,点击验证按钮,显示屏向串口发送对应的指令,由STM32通过串口控制摄像头拍摄并进行人脸识别,在显示屏上查看验证结果。2)手机app测试启动系统后,app会向机智云的服务器发送对应的指令,通过串口助手查看主控收到数据。如下图所示,可以看到在app端按下相应的控制按钮后主控的串口实时接收到的数据,数据的格式为:事件名称+数据的值+事件描述。主控串口接收的数据形式图Evt: EVENT_led_white 0 ——事件名称及其在结构体中的变量名+变量的值。

valueled_white Changed ——描述事件。

经过实测,app端对系统的控制功能稳定,可以实现实时控制及查看系统各部分的工作状况,app端和系统的延时不超过0.5 s。3)人脸识别功能测试Python中对程序进行测试,OpenMv在串口接收到特定的指令后会打开摄像头并截取当前摄像头拍摄到的画面,之后分别计算当前所拍摄的人脸和人脸图像库中人脸样本的特征差异度,最后在人脸样本中挑选出一张人脸差异度最小的,即为最接近的人脸,判断完成之后OpenMv会通过串口将所识别的结果发送至主控的串口,从而实现数据互通。本设计中主要有2个参数影响人脸识别准确性和耗时,一是人脸图像库中不同人脸的数量,下图是样本数为15人的脸图像库;二是每个人的不同角度人脸图片的张数。具体的实测数据如下所示:0c831a72-dabb-11ec-b80f-dac502259ad0.jpg人脸图像库0c8cd6fc-dabb-11ec-b80f-dac502259ad0.png人脸识别测试数据
通过实测,本设计中的人脸识别,可以很好地完成预期任务,具有较高的准确性,在一般的日常使用中基本不会判断错误,但是对光线有一定要求,过亮或过暗都会影响识别的准确率。自动分拣功能测试。由于设计中的自动分拣功能主要依据颜色识别来实现,因此颜色识别的正确率决定了自动分拣功能是否正常。将装置放置在不同光照强度的环境下测试颜色识别及自动分拣功能的稳定性,测试结果如下表所示。0cc2fcbe-dabb-11ec-b80f-dac502259ad0.png颜色识别测试数据03系统总结本文设计了一款基于机智云平台的物联网智能仓库安防系统,选用STM32F429作为主控芯片。使用Wi-Fi模块将主控芯片处理完的数据发送至机智云平台从而实现系统的联网,搭配手机端可以实时查看由系统采集的各类数据及系统各部分的工作状况,同时由于使用的是广域网数据传输因此可以对系统进行远程操控,相比之下局域网数据传输只能处于同一网络,此方案极大地拓展了操控距离。

在系统的安全性部分使用了人脸识别来作为验证手段,经实测,准确率在90%以上。在操作方式上为了适应不同的习惯提供了3种操作方式,显示屏操作、语音操作、手机app操作。在显示方面,设计了一个人机交互的图像化界面。在物品分拣上使用了颜色识别的方式,通过识别物品的不同颜色从而将之归类,有效地提高系统的效率。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2579

    文章

    56021

    浏览量

    796445
  • 芯片
    +关注

    关注

    463

    文章

    54844

    浏览量

    472219
  • 机智云
    +关注

    关注

    3

    文章

    655

    浏览量

    27897
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    机智荣获2025广州人工智能创新发展榜单最具发展潜力企业奖

    近日,由广州市科学技术局牵头评选的2025广州人工智能创新发展榜单正式揭晓,广州机智物联网科技有限公司凭借AIoT技术创新力、产业落地能力与高成长潜力,成功入选最具发展潜力企业榜,彰
    的头像 发表于 05-22 17:16 2084次阅读

    机智物联网平台设备接入完整实操教程

    协同开发能力。Part.01机智平台概述机智为国内领先物联网
    的头像 发表于 05-19 18:04 296次阅读
    <b class='flag-5'>机智</b><b class='flag-5'>云</b>物联网<b class='flag-5'>平台</b>设备接入完整实操教程

    基于STM32与机智智能家居系统(完整项目)

    物联网与嵌入式技术推动智能家居成为主流,传统家居存在功能单一、监测不全、控制繁琐等缺陷。本文设计基于STM32F103C8T6与机智平台智能
    的头像 发表于 05-15 18:04 311次阅读
    基于STM32与<b class='flag-5'>机智</b><b class='flag-5'>云</b>的<b class='flag-5'>智能</b>家居系统(完整项目)

    基于 STM32 与机智智能晾衣架设计与实现

    本项目以STM32F103C8T6单片机为核心控制单元,结合多种传感器、显示及执行器件,并搭载ESP8266WIFI模块对接机智平台,完成了智能晾衣架的整体设计与实现。项目围绕该设计
    的头像 发表于 03-27 18:41 453次阅读
    基于 STM32 与<b class='flag-5'>机智</b><b class='flag-5'>云</b>的<b class='flag-5'>智能</b>晾衣架设计与实现

    机智Gokit3开发篇》4 RGB灯的介绍与驱动移植(HAL库)

    在物联网开发与STM32嵌入式应用实践中,RGB灯是实现可视化交互、状态指示的常用外设,而机智Gokit3开发板作为物联网开发的经典硬件
    的头像 发表于 01-28 19:11 5479次阅读
    《<b class='flag-5'>机智</b><b class='flag-5'>云</b>Gokit3<b class='flag-5'>开发</b>篇》4 RGB灯的介绍与驱动移植(HAL库)

    芯科科技助力涂鸦智能推出新一代免编码AIoT开发平台

    Silicon Labs(芯科科技)通过为合作伙伴涂鸦智能(Tuya Smart)提供MG21多协议无线SoC和BG24蓝牙SoC,助力其推出免编码(No-Code)AIoT开发平台
    的头像 发表于 01-23 14:34 772次阅读

    芯科科技助力涂鸦智能推出免编码AIoT平台

    平台可加速智能照明创新进程及人工智能物联网(AIoT)生态系统构建
    的头像 发表于 01-21 11:28 394次阅读

    物联网 + 养老:基于机智与 STM32 的智能拐杖安全监测系统

    随着老龄化加剧与科技进步,“物联网+养老”成为智慧养老核心方向,老年人出行安全与健康监测需求日益迫切。针对传统拐杖智能化不足、功能单一的痛点,本文提出一种融合多传感器与机智物联网平台
    的头像 发表于 01-09 19:00 2075次阅读
    物联网 + 养老:基于<b class='flag-5'>机智</b><b class='flag-5'>云</b>与 STM32 的<b class='flag-5'>智能</b>拐杖安全监测系统

    机智AIoT智慧渔业方案斩获穗商赋能创新成果

    与人工智能技术融合发展的新路径。会上发布了“穗商赋能·广州2025年人工智能产业创新培育成果”,机智AIoT智慧渔业综合解决方案”凭借在
    的头像 发表于 01-06 11:42 706次阅读

    STM32快速上实战指南:手把手带你入门机智

    本项目基于STM32F103C8T6最小系统板,采用HAL库开发方式,结合ESP01sWi-Fi模块,实现将各类传感器数据快速上传至机智平台。通过移植
    的头像 发表于 12-10 18:04 1592次阅读
    STM32快速上<b class='flag-5'>云</b>实战指南:手把手带你入门<b class='flag-5'>机智</b><b class='flag-5'>云</b>

    基于机智平台的新疆农田气候检测系统设计与实现

    本文设计了一种基于平台的新疆农田气候检测系统,用于实时监测风速、温湿度和PM2.5等环境参数,提升农业生产智能化水平。系统采用STM32单片机与传感器采集数据,通过ESP8266Wi-Fi模块上传
    的头像 发表于 09-23 18:45 1062次阅读
    基于<b class='flag-5'>机智</b><b class='flag-5'>云</b><b class='flag-5'>平台</b>的新疆农田气候检测系统设计与实现

    STM32项目分享:智能语音台灯(机智)

    01—项目简介1.功能详解STM32智能语音台灯(机智)功能如下:STM32F103C8T6单片机作为主控单元按键切换模式,支持自
    的头像 发表于 07-24 18:03 2006次阅读
    STM32项目分享:<b class='flag-5'>智能</b>语音台灯(<b class='flag-5'>机智</b><b class='flag-5'>云</b>)

    机智配网教程 第二期:生成MCU代码包与调试

    在上一期中,我们介绍了机智GAgent固件的烧录过程,并在测试中完成了机智开发者账号的注册及数据点的创建。接下来,我将继续为大家讲解如何
    的头像 发表于 06-28 10:02 1141次阅读
    <b class='flag-5'>机智</b><b class='flag-5'>云</b>配网教程 第二期:生成MCU代码包与调试

    机智亮相字节豆包AIoT开源生态沙龙

    生态沙龙成功举办。沙龙聚焦基于豆包的 OpenEmbodied AI技术、产品及开源方案的落地与应用,配合机智AIoT软硬件方案全开源战略,为AI与IoT的深度融合奠定平台基础,将
    的头像 发表于 06-16 09:50 1256次阅读

    开源智联·具身同行:机智推出基于豆包的 OpenEmbodied AI技术、产品及开源方案

    的OpenEmbodiedAI技术、产品及开源方案的落地与应用,致力于降低AIoT开发门槛,推动具身智能在设备端的广泛应用。更多开源资料见文末开源AIoT核心能力矩阵
    的头像 发表于 06-13 19:19 1464次阅读
    开源智联·具身同行:<b class='flag-5'>机智</b><b class='flag-5'>云</b>推出基于豆包的 OpenEmbodied AI技术、产品及开源方案