0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

乐鑫ESP32-S3-BOX3方案智能AI药盒应用,启明云端技术支持和定制化服务

启明云端 2024-09-25 08:00 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

在快节奏的现代生活中,健康管理变得越来越重要。但繁忙的日常往往让我们难以时刻关注自己的健康状况,尤其是药物管理。今天,我们带您一起重现一款的新产品——ESP_BOX智能药盒,它不仅能够提醒您按时服药,还能通过面部识别技术确保安全,并通过心率和血氧监测为您的健康保驾护航。

智能药盒,您的健康小助手

想象一下,如果您的药盒能够通过云端同步您的服药计划,确保您不会错过任何一次服药时间。每日定时播报您的药物计划,让您在忙碌中也能轻松掌握用药信息。

通过先进的云端面部识别技术,防止儿童误开药盒,保障家庭用药安全。内置传感器实时监测您的心率和血氧水平,为您的健康提供更多数据支持。

34d7d432-7ad1-11ef-bb4b-92fbcf53809c.jpg

ESP32-S3-BOX3应用

使用乐鑫ESP32-S3-BOX3 作为控制面板,利用 LVGL 开发了智能药盒的操作界面,并通过 ESP RainMaker云端实现了药物管理系统。用户可随时查看和统计药物的使用记录。


系统还提供了每日药物计划的语音播报功能,让用户始终掌握服药时间和用量。通过云端面部识别功能开启药盒,防止小孩误食药物。同时,药盒还可以通过传感器监测用户的心率和血氧。

34e79570-7ad1-11ef-bb4b-92fbcf53809c.jpg

前期准备

软件环境

・当前工程使用ESP-IDF v5.1版本

硬件准备

ESP32-S3-BOX-3

ESP32-S3-BOX-3-DOCK PCBA ⼦板

・SG90 舵机(270 度)x 1

・MAX30102 心率血氧传感器 x 1

・720P USB 摄像头 x 1

34fbd86e-7ad1-11ef-bb4b-92fbcf53809c.jpg

配置项目

硬件接线

350a1492-7ad1-11ef-bb4b-92fbcf53809c.jpg

配置百度智能云API KEY 和 SECRET KEY

注:此配置为人脸识别功能的必要配置。

Kconfig.projbuild 配置用于人脸识别的百度 API KEY 和 SECRET KEY

35369864-7ad1-11ef-bb4b-92fbcf53809c.jpg

百度人脸识别

此工程的人脸识别功能使用百度人脸识别 API,使用 API 需要注册百度 AI 账号,并在控制台获取应用的 API KEY 和 SECRET KEY(个人用户每月有免费使用的次数)。使用人脸识别功能还需在控制台上传照片建立人脸库。

35445242-7ad1-11ef-bb4b-92fbcf53809c.jpg

唤醒词配置

默认唤醒词为 ”hi 乐鑫“,esp-sr 可支持以下唤醒词,可从中自由选取,在menuconfig 中进行配置

355d9270-7ad1-11ef-bb4b-92fbcf53809c.jpg

操作流程

人脸识别配置


1. 在 百度智能云中注册账号(个人账号和企业账号均可以获取免费测试资格)。

2. 进入控制台,在左上方菜单栏中找到 ”人工智能 -> 人脸识别 " 功能。

3. 在概览中的操作指引处领取免费的测试资源。

35712664-7ad1-11ef-bb4b-92fbcf53809c.jpg

4. 返回 “人脸识别 “ 概览处,创建应用以获取 API KEY 和 SECRET KEY。

5. 在 “ 应用列表 “ 中,选择上一步所创建应用的 ”人脸库 ”,并上传需要识别的人脸图像。

357f87d6-7ad1-11ef-bb4b-92fbcf53809c.jpg

源码配置

1. 获取demo 源码,在 ESP-IDF v5.1 环境下配置编译。

2. 在 Kconfig.projbuild 中,将默认值修改为先前创建应用后生成的 API KEY 和 SECRET KEY。

358b5fac-7ad1-11ef-bb4b-92fbcf53809c.jpg

3. 修改 "人脸识别 -> 人脸搜索 " 功能的接口信息,将搜索接口的 ” group_id “ 参数修改为先前上传图片时创建的用户组名称。

具体修改代码位置如下:

components/http_face_match/http_face_match.c 中找到 http_face_match() 函数,

在拼接 post 数据这里,将 group_id_listesp_friends 修改为先前在人脸识别模块创建的用户组名称。

如:snprintf(post_data, post_data_length, "

{"image":"%s","image_type":"BASE64","group_id_list":"test_1"}",

output_base64);

35a212ce-7ad1-11ef-bb4b-92fbcf53809c.jpg35b62822-7ad1-11ef-bb4b-92fbcf53809c.jpg

4. 修改人脸识别成功后的效果。demo 中依据图片的 user_id 来判断识别到的图片。需要自行修改 user_id 的判断条件,以达到对应的效果。

具体修改代码位置如下:

main/app/app_driver.c 中找到 face_check_task() 函数,在 strcmp 的字符串比较中把

后面双引号中的内容更改为人脸库里的用户名。

如:strcmp(user_id, "test_1") ...

strcmp(user_id, "test_2") ...

35c5bb3e-7ad1-11ef-bb4b-92fbcf53809c.jpg35d36090-7ad1-11ef-bb4b-92fbcf53809c.jpg

5. 完成上述配置,即可正常编译运行demo

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    89

    文章

    38162

    浏览量

    296853
  • 乐鑫
    +关注

    关注

    0

    文章

    208

    浏览量

    26587
  • ESP32
    +关注

    关注

    24

    文章

    1085

    浏览量

    20867
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    科技ESP32-S3开发板+超声波雾化,给智能鱼缸整点美学氛围

    我们为什么要给智能鱼缸弄上雾化?美学氛围当然是一面,但更重要的功能是局部加湿,为水面植物与周围空气提供柔和湿度。因此我们特意推出本期内容:用科技
    的头像 发表于 12-08 18:04 45次阅读
    <b class='flag-5'>乐</b><b class='flag-5'>鑫</b>科技<b class='flag-5'>ESP32-S3</b>开发板+超声波雾化,给<b class='flag-5'>智能</b>鱼缸整点美学氛围

    低成本开源!我用科技ESP32-S3开发板打造了一个会自己补光的智能鱼缸!启明云端代理

    还记得上期我们让鱼缸学会了"感知光线"吗?通过BH1750传感器,它能实时监测环境光强:我家鱼缸能感知光!一块科技ESP32-S3开发板就能实现环境光监测!代码开源!启明
    的头像 发表于 11-27 18:04 154次阅读
    低成本开源!我用<b class='flag-5'>乐</b><b class='flag-5'>鑫</b>科技<b class='flag-5'>ESP32-S3</b>开发板打造了一个会自己补光的<b class='flag-5'>智能</b>鱼缸!<b class='flag-5'>启明</b><b class='flag-5'>云端</b><b class='flag-5'>乐</b><b class='flag-5'>鑫</b>代理

    我家鱼缸能感知光!一块科技ESP32-S3开发板就能实现环境光监测!代码开源!启明云端代理

    科技ESP32-S3开发板,我竟在家实现了鱼缸水质监测自由?!代码开源!启明云端代理本期我们将聚焦于植物生长的关键要素——光照,进一步开
    的头像 发表于 11-26 18:04 119次阅读
    我家鱼缸能感知光!一块<b class='flag-5'>乐</b><b class='flag-5'>鑫</b>科技<b class='flag-5'>ESP32-S3</b>开发板就能实现环境光监测!代码开源!<b class='flag-5'>启明</b><b class='flag-5'>云端</b><b class='flag-5'>乐</b><b class='flag-5'>鑫</b>代理

    启明云端科技ESP32-C3蜡笔小新AI潮玩方案亮相高交会,受邀新加披《遇见AI》节目采访

    参展,国内知名AIoT解决方案提供商启明云端携搭载科技ESP32-C3芯片的“蜡笔小新”
    的头像 发表于 11-17 18:05 230次阅读
    <b class='flag-5'>启明</b><b class='flag-5'>云端</b>携<b class='flag-5'>乐</b><b class='flag-5'>鑫</b>科技<b class='flag-5'>ESP32-C3</b>蜡笔小新<b class='flag-5'>AI</b>潮玩<b class='flag-5'>方案</b>亮相高交会,受邀新加披《遇见<b class='flag-5'>AI</b>》节目采访

    荣耀全球开发者大会落幕,启明云端基于科技ESP32-C3AI蜡笔小新手办方案成潮玩焦点

    2025年10月23日,于深圳坪山成功举办的荣耀全球开发者大会暨AI终端生态大会已圆满落幕。在这场科技盛会上,作为荣耀AI战略核心合作伙伴——启明云端携基于
    的头像 发表于 10-24 18:06 311次阅读
    荣耀全球开发者大会落幕,<b class='flag-5'>启明</b><b class='flag-5'>云端</b>基于<b class='flag-5'>乐</b><b class='flag-5'>鑫</b>科技<b class='flag-5'>ESP32-C3</b>的<b class='flag-5'>AI</b>蜡笔小新手办<b class='flag-5'>方案</b>成潮玩焦点

    科技ESP32-S3遇到摄像头,秒变AI相机

    了令人惊喜的答卷。这款AI相机不仅继承了传统相机的影像捕捉能力,更通过搭载ESP32-S3芯片AI赋能实现质的飞跃:低功耗设计:让设备续航大幅提升,摆脱频繁充电的困
    的头像 发表于 10-21 18:05 334次阅读
    当<b class='flag-5'>乐</b><b class='flag-5'>鑫</b>科技<b class='flag-5'>ESP32-S3</b>遇到摄像头,秒变<b class='flag-5'>AI</b>相机

    【新品】ESP32-S3-NORA模组自带Wi-Fi/BLE,板载陶瓷天线

    启明云端新品发布WT0132S3-NORA模组,这款模组不仅继承了科技ESP32-S3芯片的
    的头像 发表于 09-10 18:03 952次阅读
    【新品】<b class='flag-5'>ESP32-S3</b>-NORA模组自带Wi-Fi/BLE,板载陶瓷天线

    ESP32-S3专为AIoT设计,强化边缘AI应用方向

    电子发烧友网报道(文/李弯弯)在最新的财报中表示,公司ESP32-S系列自ESP32-S3芯片开始,强化了边缘AI方向的应用。
    的头像 发表于 09-09 09:20 6948次阅读
    <b class='flag-5'>乐</b><b class='flag-5'>鑫</b><b class='flag-5'>ESP32-S3</b>专为AIoT设计,强化边缘<b class='flag-5'>AI</b>应用方向

    ESP32-C3开发板全面支持小智AI!烧录实战指南来了!

    本文将详细解析基于ESP32-C3芯片的ZXAIEC43开发板烧录“小智”AI语音系统的全流程。该方案代码完全开源,
    的头像 发表于 06-13 18:01 3542次阅读
    <b class='flag-5'>ESP32-C3</b>开发板全面<b class='flag-5'>支持</b>小智<b class='flag-5'>AI</b>!烧录实战指南来了!

    ESP-RTC实时音视频通信方案

    ESP32-S3-Korvo-2多媒体开发板为核心。ESP32-S3-Korvo-2搭载ESP32-S3AISoC,拥有双麦克风阵列,支持近/远场语音唤醒和语音识别。它还集成了摄像头、
    的头像 发表于 05-26 18:07 1254次阅读
    <b class='flag-5'>乐</b><b class='flag-5'>鑫</b><b class='flag-5'>ESP</b>-RTC实时音视频通信<b class='flag-5'>方案</b>

    科技自研声学前端算法通过亚马逊 Alexa 认证,启明云端科技代理商

    领域打造领先的无线连接方案,并已向提供高性能的边缘机器学习迈出了坚实的一步。AFE算法可基于集成了AI和DSP加速的ESP32-S3So
    的头像 发表于 05-15 18:08 775次阅读
    <b class='flag-5'>乐</b><b class='flag-5'>鑫</b>科技自研声学前端算法通过亚马逊 Alexa 认证,<b class='flag-5'>启明</b><b class='flag-5'>云端</b><b class='flag-5'>乐</b><b class='flag-5'>鑫</b>科技代理商

    ESP32-C5全面进入量产!启明云端科技代理商

    信息科技(688018.SH)宣布,ESP32-C5现已全面进入量产。作为行业首款2.4&5GHz双频Wi-Fi6的RISC-VSoC,ESP32-C5同时集成Bluetooth5
    的头像 发表于 04-30 18:10 844次阅读
    <b class='flag-5'>乐</b><b class='flag-5'>鑫</b><b class='flag-5'>ESP32</b>-C5全面进入量产!<b class='flag-5'>启明</b><b class='flag-5'>云端</b><b class='flag-5'>乐</b><b class='flag-5'>鑫</b>科技代理商

    AI技术支持ESP32模组接大电容无法正常启动处理

    启明云端/01问题描述客户在工控产品上使用ESP32-WROOM-32E-N4模组,ESP-
    的头像 发表于 01-20 18:03 1445次阅读
    【<b class='flag-5'>AI</b><b class='flag-5'>技术支持</b>】<b class='flag-5'>ESP32</b>模组接大电容无法正常启动处理

    AI技术支持ESP32-S3芯片重复异常复位问题处理

    启明云端/01问题描述客户在扫码枪产品中使用ESP32-S3芯片,ESP-IDF版本为idf5.1.0时,产品上电后一直处于异常复位,复位提示原因主要有TG0WDT_SYS_RST
    的头像 发表于 01-17 18:08 3172次阅读
    【<b class='flag-5'>AI</b><b class='flag-5'>技术支持</b>】<b class='flag-5'>ESP32-S3</b>芯片重复异常复位问题处理

    AI技术支持ESP32-S3模组EspBleOTA搜索不到ble_ota例程的蓝牙问题处理

    启明云端/01问题描述在智能标识牌上使用ESP32-S3-WROOM-1U模组,ESP-IDF版本为idf5.0.2时,客户在
    的头像 发表于 12-13 18:06 2885次阅读
    【<b class='flag-5'>AI</b><b class='flag-5'>技术支持</b>】<b class='flag-5'>ESP32-S3</b>模组EspBleOTA搜索不到ble_ota例程的蓝牙问题处理