0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

利用SensorTile.box打开婴儿哭泣探测器大门

星星科技指导员 来源:意法半导体 作者:意法半导体 2022-05-12 10:18 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

上面的标题是粗体的,但它背后的 ST 软件名为 Baby Crying Detector 的创建。该应用程序是我们的 iOSAndroid 移动工具STBLESensor上提供的众多演示之一。该应用程序与ST 最强大的传感器平台 SensorTile.box配合使用。顾名思义,婴儿哭泣探测器检测婴儿是否在哭泣。SensorTile.box 使用其MP23ABS1 MEMS 麦克风以 16 kHz 样本记录声音。然后,它处理信号,然后将其传递给在主机STM32L4R9上运行的机器学习算法。如果系统确定孩子在哭泣,传感器板上的 LED 会变为绿色,智能手机会通过蓝牙接收警报。

在一系列悲剧登上报纸头版后,ST 工程师决定编写 Baby Crying Detector。在炎热的夏天,父母会不经意地将孩子留在车里,直到为时已晚才意识到这一点。因此,我们的专家提出了一个简单的问题:我们能否用现有技术防止此类悲剧发生?由于处于困境中的孩子几乎总是会哭泣,因此检测到他们的尖叫声可能会触发警报。问题是要有效,应用程序需要精确。因此,人工智能是必要的,因为对算法进行硬编码将是一项艰巨的工作。此外,该平台需要足够强大的传感器来捕获质量数据。ST 工程师因此意识到SensorTile.box打开了婴儿哭泣探测器的大门,因为它将人工智能和性能集中在一个屋檐下。

婴儿哭泣探测器:曾几何时,有数据

获取质量数据

当 ST 工程师开始研究婴儿哭泣探测器时,他们遇到的第一个障碍是寻找有用的训练数据。著名的格言“垃圾进,垃圾出”与机器学习特别相关。因此,我们的团队首先梳理了数十小时的婴儿哭声录音。他们还意识到拒绝数据同样重要。因此,获取环境噪音、动物和成年人哭泣等许多其他方面的样本至关重要。最终,我们工程师的磨难凸显了当今获取高质量数据的困难,并暴露了 ST 合作伙伴可以帮助收集数据的重要性。

解决误报

一旦 ST 团队认为他们的数据集令人满意,他们就开始测试神经网络。初步评估令人鼓舞。然而,他们也意识到他们有一些反复出现的误报。其中一个发生在系统将狗的嚎叫误认为是婴儿的哭声时。为了解决这个问题,我们的团队在将音频信号发送到神经网络之前调整了快速傅里叶变换。ST 工程师还实施了惯性检测系统。Baby Crying Detector 假设车内只有一个婴儿。如果车辆在移动,则意味着有司机,警报是无用的。当前的实现相对基本,但开发人员可以使用 SensorTile.box 上的 LSM6DSOX 的机器学习核心来感知运动,同时将功耗保持在最低水平。

使用 STM32Cube.AI 转换神经网络

Baby Crying Detector 的另一个突出特点是能够在 STM32L4 上运行机器学习算法。为了实现这样的壮举,ST 工程师使用了 STM32CubeMX.AI。扩展软件将神经网络转换为 STM32 的优化代码。在这种情况下,我们的开发人员在Keras上创建了一个神经网络。该 API 基于 TensorFlow 2.0 构建,生成一个 Python 库,用户随后可以使用X-CUBE-AI对其进行处理。结果是开发人员可以在主循环中调用的二进制文件。因此,Baby Cry Detector 从麦克风获取信号,将其发送到由 X-CUBE-AI 优化的神经网络,并返回系统是否检测到婴儿遇险。

不是最终产品

婴儿哭泣探测器甚至可以防止一个孩子死亡吗?我们相信答案是“是的”,但我们也知道我们的应用程序还没有准备好进入市场。希望销售类似解决方案的公司将不得不收集更多数据并创建更复杂的神经网络以提高其准确性。但是,我们的应用程序通过来自 Internet 的简单数据集展示了我们在短时间内完成的工作。因此,婴儿哭泣探测器以非常真实的方式展示了人工智能和传感器的潜力,以及工程师在投资 SensorTile.box 和 ST 生态系统时可以期待什么。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2573

    文章

    54372

    浏览量

    786081
  • 智能手机
    +关注

    关注

    66

    文章

    18672

    浏览量

    185564
  • 神经网络
    +关注

    关注

    42

    文章

    4827

    浏览量

    106797
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    相机分辨率:融合探测器与光学性能

    图1、该系统的调制传递函数为 MTFSYS = MTFOPTICS*MTFDETECTOR。由于探测器的调制传递函数起着主导作用,所以这是一个受探测器限制的系统(Fλ/d = 0.1) 相机的分辨率
    的头像 发表于 11-11 07:58 139次阅读
    相机分辨率:融合<b class='flag-5'>探测器</b>与光学性能

    混合探测器与光电倍增管的区别以及参数解析

    混合探测器又叫混合型光电探测器,简称HPD(Hybrid photon detector)。混合探测器也具有倍增功能,与光电倍增管(PMT)的区别主要是倍增方式不同---混合探测器的倍
    的头像 发表于 10-11 08:14 241次阅读
    混合<b class='flag-5'>探测器</b>与光电倍增管的区别以及参数解析

    光电探测器PMT、APD、CCD、CMos、ICCD、EMCCD

    PMT和APD都属于点探测器,只能探测光子信息,可以通过扫描方式测光谱。CCD和CMOS属于线阵或者面探测器,可以成像。ICCD和EMCCD属于不同类型的CCD。 一、PMT PMT:光电倍增管
    的头像 发表于 09-16 07:58 800次阅读
    光电<b class='flag-5'>探测器</b>PMT、APD、CCD、CMos、ICCD、EMCCD

    VirtualLab:通用探测器

    摘要 通用探测器是VirtualLab Fusion中来评估和输出电磁场任何信息的最通用工具。它能够提供不同域(空间域和空间频域)和坐标系(场与探测器位置坐标系)的信息。此外,通过使用非常灵活的内置
    发表于 06-12 08:59

    DZR185AC零偏压肖特基二极管探测器

    DZR185AC是一款由HEROTEK公司生产的零偏压肖特基二极管探测器,专为高频信号检测设计。其核心优势在于无需外部偏置电压即可工作,通过金属-半导体接触形成的肖特基势垒实现信号检波。相比传统对数
    发表于 05-12 09:18

    VirtualLab Fusion应用:光波导系统的均匀性探测器

    个均匀性检测,为此类研究提供工具。在本文档中,我们演示了均匀性检测的配置选项。 这个使用用例展示了 … 均匀性检测 均匀性检测的编辑对话框
    发表于 04-30 08:49

    红外探测器像元尺寸怎么选

    像元尺寸指的是在红外探测器芯片焦平面阵列上,每个像元的实际物理尺寸,通常以微米(μm)为单位。常见的规格有8μm、12μm、17μm、25μm等。像元尺寸直接影响着红外热成像组件的体积、成本以及成像
    的头像 发表于 04-01 16:43 1093次阅读
    红外<b class='flag-5'>探测器</b>像元尺寸怎么选

    红外探测器像元尺寸详解

    红外探测器像元尺寸是红外热成像领域中的一个关键参数,它指的是在红外探测器芯片焦平面阵列上,每个像元的实际物理尺寸,通常以微米(μm)为单位来进行表示,常见的像元尺寸有8μm、12μm、17μm、25μm等。以下是对红外探测器像元
    的头像 发表于 03-31 16:33 1523次阅读
    红外<b class='flag-5'>探测器</b>像元尺寸详解

    红外探测器的分类介绍

    和量化这种辐射,红外探测器利用了多种物理效应,其中最为关键的是红外热效应和光电效应。这些效应的输出大多为电量形式,或者可以方便地转换为电量,从而实现了对红外辐射的
    的头像 发表于 03-27 15:33 2001次阅读
    红外<b class='flag-5'>探测器</b>的分类介绍

    解决方案 | 声纳探测器 低噪运放破解水下探测难题

    声纳探测器解决方案总述:声纳探测器是一种利用声波在水下传播特性来探测目标的设备。它通过发射声波,然后接收目标反射回来的回波,根据回波的时间、频率和幅度等信息,确定目标的位置、形状、大小
    的头像 发表于 02-24 13:49 1457次阅读
    解决方案 | 声纳<b class='flag-5'>探测器</b> 低噪运放破解水下<b class='flag-5'>探测</b>难题

    VirtualLab Fusion应用:用于光波导系统的均匀性探测器

    探测器,可以进行所需的研究。在本文件中,我们将演示可用的选项以及如何操作均匀性探测器。 案例演示 均匀性探测器 探测器功能:相干参数 如果存在多个相干模式,则重叠的模可以相干
    发表于 02-08 08:57

    为什么高度空间大于12米的场所必须安装故障电弧探测器

    探测器
    jf_55902079
    发布于 :2025年01月20日 16:12:33

    探测器的基本原理

    通过光伏效应,硅探测器提供了一种将光能转化为电流的方法。这种现象背后的理论根源是探测器价带和导带之间的小能隙。当具有足够能量将电子从价态激发到导带的光入射到探测器上时,由此产生的电荷积累会导致连接
    的头像 发表于 01-08 06:22 798次阅读
    硅<b class='flag-5'>探测器</b>的基本原理

    用于光波导系统的均匀性探测器

    提供了均匀性探测器,可以进行所需的研究。在本文件中,我们将演示可用的选项以及如何操作均匀性探测器。 **案例演示 ** **均匀性探测器 ** **探测器功能:相干参数 ** 如
    发表于 12-20 10:30

    红外光束烟雾探测器

    光束烟感电子软件设计 反射光束感烟探测器,内置激光指针和数字指南,设计成人性化的认准方法。 内置微处理,可自我诊断和监视内部故障。 支持安装距离:8~160米。
    发表于 12-16 18:12