0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

利用SensorTile.box打开婴儿哭泣探测器大门

星星科技指导员 来源:意法半导体 作者:意法半导体 2022-05-12 10:18 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

上面的标题是粗体的,但它背后的 ST 软件名为 Baby Crying Detector 的创建。该应用程序是我们的 iOSAndroid 移动工具STBLESensor上提供的众多演示之一。该应用程序与ST 最强大的传感器平台 SensorTile.box配合使用。顾名思义,婴儿哭泣探测器检测婴儿是否在哭泣。SensorTile.box 使用其MP23ABS1 MEMS 麦克风以 16 kHz 样本记录声音。然后,它处理信号,然后将其传递给在主机STM32L4R9上运行的机器学习算法。如果系统确定孩子在哭泣,传感器板上的 LED 会变为绿色,智能手机会通过蓝牙接收警报。

在一系列悲剧登上报纸头版后,ST 工程师决定编写 Baby Crying Detector。在炎热的夏天,父母会不经意地将孩子留在车里,直到为时已晚才意识到这一点。因此,我们的专家提出了一个简单的问题:我们能否用现有技术防止此类悲剧发生?由于处于困境中的孩子几乎总是会哭泣,因此检测到他们的尖叫声可能会触发警报。问题是要有效,应用程序需要精确。因此,人工智能是必要的,因为对算法进行硬编码将是一项艰巨的工作。此外,该平台需要足够强大的传感器来捕获质量数据。ST 工程师因此意识到SensorTile.box打开了婴儿哭泣探测器的大门,因为它将人工智能和性能集中在一个屋檐下。

婴儿哭泣探测器:曾几何时,有数据

获取质量数据

当 ST 工程师开始研究婴儿哭泣探测器时,他们遇到的第一个障碍是寻找有用的训练数据。著名的格言“垃圾进,垃圾出”与机器学习特别相关。因此,我们的团队首先梳理了数十小时的婴儿哭声录音。他们还意识到拒绝数据同样重要。因此,获取环境噪音、动物和成年人哭泣等许多其他方面的样本至关重要。最终,我们工程师的磨难凸显了当今获取高质量数据的困难,并暴露了 ST 合作伙伴可以帮助收集数据的重要性。

解决误报

一旦 ST 团队认为他们的数据集令人满意,他们就开始测试神经网络。初步评估令人鼓舞。然而,他们也意识到他们有一些反复出现的误报。其中一个发生在系统将狗的嚎叫误认为是婴儿的哭声时。为了解决这个问题,我们的团队在将音频信号发送到神经网络之前调整了快速傅里叶变换。ST 工程师还实施了惯性检测系统。Baby Crying Detector 假设车内只有一个婴儿。如果车辆在移动,则意味着有司机,警报是无用的。当前的实现相对基本,但开发人员可以使用 SensorTile.box 上的 LSM6DSOX 的机器学习核心来感知运动,同时将功耗保持在最低水平。

使用 STM32Cube.AI 转换神经网络

Baby Crying Detector 的另一个突出特点是能够在 STM32L4 上运行机器学习算法。为了实现这样的壮举,ST 工程师使用了 STM32CubeMX.AI。扩展软件将神经网络转换为 STM32 的优化代码。在这种情况下,我们的开发人员在Keras上创建了一个神经网络。该 API 基于 TensorFlow 2.0 构建,生成一个 Python 库,用户随后可以使用X-CUBE-AI对其进行处理。结果是开发人员可以在主循环中调用的二进制文件。因此,Baby Cry Detector 从麦克风获取信号,将其发送到由 X-CUBE-AI 优化的神经网络,并返回系统是否检测到婴儿遇险。

不是最终产品

婴儿哭泣探测器甚至可以防止一个孩子死亡吗?我们相信答案是“是的”,但我们也知道我们的应用程序还没有准备好进入市场。希望销售类似解决方案的公司将不得不收集更多数据并创建更复杂的神经网络以提高其准确性。但是,我们的应用程序通过来自 Internet 的简单数据集展示了我们在短时间内完成的工作。因此,婴儿哭泣探测器以非常真实的方式展示了人工智能和传感器的潜力,以及工程师在投资 SensorTile.box 和 ST 生态系统时可以期待什么。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2578

    文章

    55811

    浏览量

    795411
  • 智能手机
    +关注

    关注

    66

    文章

    18711

    浏览量

    186421
  • 神经网络
    +关注

    关注

    42

    文章

    4845

    浏览量

    108373
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    探测器革命

    全新的2023.1快速物理光学建模设计软件终于问世。而且它还带来了很多新功能。我们想特别强调的一个方面是新的通用探测器和它在探测器建模方面带来的演变。这个新的元件取代了电磁场探测器,并像它的前身一样
    发表于 04-16 08:24

    [VirtualLab] 通用探测器

    Release 2023.1-附加组件概述 探测器插件-可编程的代码片段 文件信息
    发表于 04-15 08:14

    一文读懂:可燃气体探测器的有效检测距离是多少?

    在石油、化工、燃气、仓储等易燃易爆场景中,可燃气体探测器是防范泄漏、杜绝爆炸与中毒事故的关键防线。而探测器能否及时、准确报警,有效检测距离是核心设计指标之一。距离过远会导致响应滞后,距离过密又会造成资源浪费,只有严格遵循国家标准、合理布设
    的头像 发表于 03-31 09:26 629次阅读

    [VirtualLab] 光波导系统的均匀性探测器

    个均匀性检测,为此类研究提供工具。在本文档中,我们演示了均匀性检测的配置选项。 这个使用用例展示了 … 均匀性检测 均匀性检测的编辑对话框
    发表于 03-30 09:27

    行业科普丨气体探测器为何要定期校准?

    气体探测器定期校准
    的头像 发表于 03-17 10:51 554次阅读
    行业科普丨气体<b class='flag-5'>探测器</b>为何要定期校准?

    电气火灾监控探测器的防护方

    1. 电气火灾监控探测器 电气火灾监控探测器是指探测被保护线路中的剩余电流、温度等电气火灾危险参数变化的探测器,适用在电气火灾发生机率最大的工厂、大型库房、办公室、商业建筑、宾馆、住宅
    的头像 发表于 01-26 16:43 410次阅读
    电气火灾监控<b class='flag-5'>探测器</b>的防护方

    红外焦平面探测器核心指标NETD介绍

    红外焦平面探测器的NETD(Noise Equivalent Temperature Difference),即等效噪声温差,又称为热灵敏度。NETD是衡量其灵敏度的核心参数,表示探测器能够分辨的最小温度差异。
    的头像 发表于 01-26 14:24 939次阅读
    红外焦平面<b class='flag-5'>探测器</b>核心指标NETD介绍

    寒潮来袭,气体探测器能否“扛住”?

    ——诺安智能气体探测器冬季防护指南全国各地已开启“速冻模式”,强寒潮持续侵袭,气温再创新低,各类场所用气需求增加,气体安全监测仍然是重中之重。而在工业生产、管道运输等已安装气体探测器的场景中,一个
    的头像 发表于 01-13 14:28 606次阅读
    寒潮来袭,气体<b class='flag-5'>探测器</b>能否“扛住”?

    Amphenol数字红外探测器评估套件使用指南

    Amphenol数字红外探测器评估套件使用指南 在电子设计领域,红外探测器的应用越来越广泛。Amphenol的数字红外探测器评估套件(Digital IR EVM KIT,Part No.
    的头像 发表于 12-11 09:20 759次阅读

    相机分辨率:融合探测器与光学性能

    图1、该系统的调制传递函数为 MTFSYS = MTFOPTICS*MTFDETECTOR。由于探测器的调制传递函数起着主导作用,所以这是一个受探测器限制的系统(Fλ/d = 0.1) 相机的分辨率
    的头像 发表于 11-11 07:58 701次阅读
    相机分辨率:融合<b class='flag-5'>探测器</b>与光学性能

    光学气体成像(OGI)探测器应用场景有哪些?

    光学气体成像(OGI)探测器依托先进的红外热成像技术,能够精准捕捉气体分子在特定红外波段的吸收特征,将原本难以察觉的气体泄漏转化为清晰可见的热成像画面,为工业安全与环境监测提供了高效、直观的解决方案。凭借非接触式检测、实时动态追踪等优势,OGI探测器在多个领域展现出重要应
    的头像 发表于 11-07 13:32 658次阅读
    光学气体成像(OGI)<b class='flag-5'>探测器</b>应用场景有哪些?

    混合探测器与光电倍增管的区别以及参数解析

    混合探测器又叫混合型光电探测器,简称HPD(Hybrid photon detector)。混合探测器也具有倍增功能,与光电倍增管(PMT)的区别主要是倍增方式不同---混合探测器的倍
    的头像 发表于 10-11 08:14 964次阅读
    混合<b class='flag-5'>探测器</b>与光电倍增管的区别以及参数解析

    光电探测器PMT、APD、CCD、CMos、ICCD、EMCCD

    PMT和APD都属于点探测器,只能探测光子信息,可以通过扫描方式测光谱。CCD和CMOS属于线阵或者面探测器,可以成像。ICCD和EMCCD属于不同类型的CCD。 一、PMT PMT:光电倍增管
    的头像 发表于 09-16 07:58 2409次阅读
    光电<b class='flag-5'>探测器</b>PMT、APD、CCD、CMos、ICCD、EMCCD

    零偏置硅肖特基势垒探测器二极管 skyworksinc

    电子发烧友网为你提供()零偏置硅肖特基势垒探测器二极管相关产品参数、数据手册,更有零偏置硅肖特基势垒探测器二极管的引脚图、接线图、封装手册、中文资料、英文资料,零偏置硅肖特基势垒探测器二极管真值表,零偏置硅肖特基势垒
    发表于 07-14 18:33
    零偏置硅肖特基势垒<b class='flag-5'>探测器</b>二极管 skyworksinc

    VirtualLab:通用探测器

    摘要 通用探测器是VirtualLab Fusion中来评估和输出电磁场任何信息的最通用工具。它能够提供不同域(空间域和空间频域)和坐标系(场与探测器位置坐标系)的信息。此外,通过使用非常灵活的内置
    发表于 06-12 08:59