0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

利用SensorTile.box打开婴儿哭泣探测器大门

星星科技指导员 来源:意法半导体 作者:意法半导体 2022-05-12 10:18 次阅读

上面的标题是粗体的,但它背后的 ST 软件名为 Baby Crying Detector 的创建。该应用程序是我们的 iOSAndroid 移动工具STBLESensor上提供的众多演示之一。该应用程序与ST 最强大的传感器平台 SensorTile.box配合使用。顾名思义,婴儿哭泣探测检测婴儿是否在哭泣。SensorTile.box 使用其MP23ABS1 MEMS 麦克风以 16 kHz 样本记录声音。然后,它处理信号,然后将其传递给在主机STM32L4R9上运行的机器学习算法。如果系统确定孩子在哭泣,传感器板上的 LED 会变为绿色,智能手机会通过蓝牙接收警报。

在一系列悲剧登上报纸头版后,ST 工程师决定编写 Baby Crying Detector。在炎热的夏天,父母会不经意地将孩子留在车里,直到为时已晚才意识到这一点。因此,我们的专家提出了一个简单的问题:我们能否用现有技术防止此类悲剧发生?由于处于困境中的孩子几乎总是会哭泣,因此检测到他们的尖叫声可能会触发警报。问题是要有效,应用程序需要精确。因此,人工智能是必要的,因为对算法进行硬编码将是一项艰巨的工作。此外,该平台需要足够强大的传感器来捕获质量数据。ST 工程师因此意识到SensorTile.box打开了婴儿哭泣探测器的大门,因为它将人工智能和性能集中在一个屋檐下。

婴儿哭泣探测器:曾几何时,有数据

获取质量数据

当 ST 工程师开始研究婴儿哭泣探测器时,他们遇到的第一个障碍是寻找有用的训练数据。著名的格言“垃圾进,垃圾出”与机器学习特别相关。因此,我们的团队首先梳理了数十小时的婴儿哭声录音。他们还意识到拒绝数据同样重要。因此,获取环境噪音、动物和成年人哭泣等许多其他方面的样本至关重要。最终,我们工程师的磨难凸显了当今获取高质量数据的困难,并暴露了 ST 合作伙伴可以帮助收集数据的重要性。

解决误报

一旦 ST 团队认为他们的数据集令人满意,他们就开始测试神经网络。初步评估令人鼓舞。然而,他们也意识到他们有一些反复出现的误报。其中一个发生在系统将狗的嚎叫误认为是婴儿的哭声时。为了解决这个问题,我们的团队在将音频信号发送到神经网络之前调整了快速傅里叶变换。ST 工程师还实施了惯性检测系统。Baby Crying Detector 假设车内只有一个婴儿。如果车辆在移动,则意味着有司机,警报是无用的。当前的实现相对基本,但开发人员可以使用 SensorTile.box 上的 LSM6DSOX 的机器学习核心来感知运动,同时将功耗保持在最低水平。

使用 STM32Cube.AI 转换神经网络

Baby Crying Detector 的另一个突出特点是能够在 STM32L4 上运行机器学习算法。为了实现这样的壮举,ST 工程师使用了 STM32CubeMX.AI。扩展软件将神经网络转换为 STM32 的优化代码。在这种情况下,我们的开发人员在Keras上创建了一个神经网络。该 API 基于 TensorFlow 2.0 构建,生成一个 Python 库,用户随后可以使用X-CUBE-AI对其进行处理。结果是开发人员可以在主循环中调用的二进制文件。因此,Baby Cry Detector 从麦克风获取信号,将其发送到由 X-CUBE-AI 优化的神经网络,并返回系统是否检测到婴儿遇险。

不是最终产品

婴儿哭泣探测器甚至可以防止一个孩子死亡吗?我们相信答案是“是的”,但我们也知道我们的应用程序还没有准备好进入市场。希望销售类似解决方案的公司将不得不收集更多数据并创建更复杂的神经网络以提高其准确性。但是,我们的应用程序通过来自 Internet 的简单数据集展示了我们在短时间内完成的工作。因此,婴儿哭泣探测器以非常真实的方式展示了人工智能和传感器的潜力,以及工程师在投资 SensorTile.box 和 ST 生态系统时可以期待什么。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2515

    文章

    47694

    浏览量

    738690
  • 智能手机
    +关注

    关注

    66

    文章

    17993

    浏览量

    176871
  • 神经网络
    +关注

    关注

    42

    文章

    4538

    浏览量

    98438
收藏 人收藏

    评论

    相关推荐

    金属探测器电路图分享

    金属探测器是一种应用广泛的探测器,主要用于探测金属物品。它可以通过电磁感应、X射线检测或微波检测等技术,对金属物品进行探测。金属探测器的工作
    的头像 发表于 02-02 12:20 981次阅读
    金属<b class='flag-5'>探测器</b>电路图分享

    脉冲探测器图纸需要的截图

    探测器
    电子爱好者(松哥)
    发布于 :2023年12月04日 14:55:17

    Sensortile.box介绍

    用STM32 ST-LINK Utility更新固件 1. 选择【Connect to the target】连接目标板,读取 MCU内当前的二进制文件 2. 选择【Target】→【Erase Chip】擦除STM32 FLASH 3. 选择【File】→【Open File】,将.bin文件下载到目 标板上 4. 选择【Target】→【Program】 5. 点击【Start】开始下载
    发表于 09-13 06:43

    STEVAL-MKSBOX1V1数据手册

    STEVAL-MKSBOX1V1(SensorTile.box)是一款即用型套件,具有无线物联网和可穿戴传感平台功能,无论您的专业知识水平如何,都能帮助您使用和开发基于远程运动和环境传感数据
    发表于 09-13 06:40

    STEVAL-MKSBOX1V1解决方案

    STEVAL-MKSBOX1V1(SensorTile.box)是一款即用型套件,具有无线物联网和可穿戴传感平台功能,无论您的专业知识水平如何,都能帮助您使用和开发基于远程运动和环境传感数据
    发表于 09-08 08:24

    基于NanoEdgeAI的异常检测方案

    NanoEdge AI Studio自动创建基于三轴加速度传感信号的AI模型,并快速部署到ST SensorTile.box开发板上,进行异常检测。
    发表于 09-07 06:27

    SensorTile.box初级入门模式 (Basic mode)介绍

    SensorTile.box开箱即可连接智能手机用户可以通过Android/IOS应用程序获得预定义应用
    发表于 09-06 06:39

    Sensortile.box介绍

    准备就绪的物联网节点• 外壳防护等级:IP54• 与智能手机的应用程序配合
    发表于 09-06 06:20

    光电探测器的主要噪声源及其成因

    光电探测器的主要噪声源有以下几种: 散弹噪声:这是由于光电探测器中的光电子或载流子随机产生造成的,存在于真空发射管和半导体器件中,属于白噪声。 热噪声:这是由于暗电流大小与偏压、温度及反向饱和电流
    发表于 09-01 17:05

    SensorTile.box第一部分:初级入门模式(Basic mode)介绍

    电子发烧友网站提供《SensorTile.box第一部分:初级入门模式(Basic mode)介绍.pdf》资料免费下载
    发表于 07-31 10:10 0次下载
    <b class='flag-5'>SensorTile.box</b>第一部分:初级入门模式(Basic mode)介绍

    SensorTile.box第二部分:专家模式(Expert mode)介绍

    电子发烧友网站提供《SensorTile.box第二部分:专家模式(Expert mode)介绍.pdf》资料免费下载
    发表于 07-31 10:08 0次下载
    <b class='flag-5'>SensorTile.box</b>第二部分:专家模式(Expert mode)介绍

    Sensortile.box介绍

    电子发烧友网站提供《Sensortile.box介绍.pdf》资料免费下载
    发表于 07-31 10:02 0次下载
    <b class='flag-5'>Sensortile.box</b>介绍

    SensorTile.box第三部分:编程模式(Pro mode)介绍

    电子发烧友网站提供《SensorTile.box第三部分:编程模式(Pro mode)介绍.pdf》资料免费下载
    发表于 07-29 16:19 0次下载
    <b class='flag-5'>SensorTile.box</b>第三部分:编程模式(Pro mode)介绍

    红外探测器:热探测器与光子探测器

    中,我们将深入探讨热探测器和光子探测器的工作原理,性能等。热探测器的工作原理热探测器利用红外辐射的热效应工作的设备。它的工作原理是,当其敏
    的头像 发表于 07-19 17:12 1290次阅读
    红外<b class='flag-5'>探测器</b>:热<b class='flag-5'>探测器</b>与光子<b class='flag-5'>探测器</b>

    意法半导体多传感器智能采集器升级亮相慕尼黑上海电子展

    SensorTile.Box支持三种工作模式:入门模式、专家模式、专业模式,无论是新手小白还是专业人士都可以借此尽情探索物联网应用。
    发表于 07-15 15:18 1284次阅读
    意法半导体多传感器智能采集器升级亮相慕尼黑上海电子展