0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

恩智浦公司得意新作智能语音技术亮相

NXP客栈 来源:NXP客栈 作者:NXP客栈 2021-05-18 14:31 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

“Hey NXP”、”哈啰恩智浦”……一声又一声的问候在宁静的办公室里格外惹人注目,原来是恩智浦公司又一呕心沥血的得意新作——智能语音技术(VIT)。

智能语音技术(Voice Intelligent Technology – VIT)基于最先进的深度学习语音识别技术,是一款完整的唤醒词/语音命令解决方案。

VIT在MCUXpresso SDK中支持的恩智浦设备上免费提供,目前已经可以支持英语,而中文、土耳其语、西班牙语等其他语言也正如火如荼地开发测试当中。

VIT功能包括

唤醒词引擎(Wake Word Engine - WWE):它使用了训练所需要并且已记录的触发词文件。

在训练阶段使用数据增强技术来整合数据集中的可变性。

利用神经网络分类器来确定提取的音素序列是否与目标关键字对应。

不需要音频数据集的语音命令引擎(Voice Commands Engine - VCE)。

目标语音命令在脱机过程中被转换为单词符号序列,VCE在运行时确定提取的音素序列是否对应于特定的单词符号序列以及命令。

一个模型可以支持从大量词汇当中所挑选的30个语音命令。

简而言之VIT可以

通过Text2Model工具创建的自定义命令

自定义触发字选项

低延迟检测(<200ms)

VIT现已经支持的平台有

i.MX RT600系列:Cortex-M33内核,HiFi4 DSP处理器,评估板为MIMXRT685-EVK

i.MX RT1060系列:Cortex-M7内核,评估板为MIMXRT1060-EVK

VIT可以利用语音服务来唤醒并控制物联网装置或家用设备。目前的VIT版本可以支持唤醒词以及利用Text2Model工具所产生的语音命令,如下图所示↓↓↓

d3adfdf8-b4d1-11eb-bf61-12bb97331649.jpg

唤醒词模型是从关键词档案数据库所创建,而语音命令模型则是由Text2Model工具所产生。目前SDK中所内建的VIT函式库可以侦测 “Hey NXP” 关键词以及12个在VIT_Voice_Commands.h当中所预设的语音命令。

这次VIT的发布包含了以下的部分:

Lib/libVIT_PLATFORM_VERSION.a :平台可以选HIFI4或Cortex-M7

Lib/VIT.h :描述VIT公用的API

Lib/VIT_Model.h :VIT模型档案包含了唤醒词和语音命令的描述

VIT_Voice_Commands.h :列举VIT函式库所支持的语音命令

Lib/Inc :涵盖VIT公用接口定义的文件夹

ExApp/VIT_ExApp.c :VIT范例

VIT提供丰富API以供使用者操作:

VIT_SetModel:储存VIT模块的地址,并确认此模块是否能被VIT函式库所支持

VIT_GetMemoryTable:通知软件应用程序VIT函式所需要的内存。共定义四种不同的内存区块,Fast data / Slow data / fast coefficient /Temporary or scratch

VIT_GetInstanceHandle:设置并初始化VIT,所有的内存都被映像到子模块所需的缓冲区

VIT_SetControlParameters:设置或修改VIT的控制参数

VIT_Process:分析音频以辨识是唤醒词或语音命令

VIT_GetVoiceCommandFound:VIT读取命令编号与名称

VIT_GetModelInfo:辅助API,用来取得VIT模块的讯息

VIT_ResetInstance:辅助API,用来重置VIT模块

VIT_GetControlParameters:辅助API,用来取得VIT的控制参数

VIT_GetStatusParameters:辅助API,用来取得VIT的状态参数

以下为简单的API调用流程↓↓↓

d3cdb4a4-b4d1-11eb-bf61-12bb97331649.png

原文标题:免费提供!VIT智能语音技术:恩智浦深度学习应用又一得意之作!

文章出处:【微信公众号:NXP客栈】欢迎添加关注!文章转载请注明出处。

责任编辑:haq
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 恩智浦
    +关注

    关注

    14

    文章

    6055

    浏览量

    135408
  • 智能语音
    +关注

    关注

    11

    文章

    823

    浏览量

    50064
  • 深度学习
    +关注

    关注

    73

    文章

    5591

    浏览量

    123926

原文标题:免费提供!VIT智能语音技术:恩智浦深度学习应用又一得意之作!

文章出处:【微信号:NXP客栈,微信公众号:NXP客栈】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    安富利邀您共赴2025创新技术峰会深圳站

    12月9日,创新技术峰会即将落地深圳!本届峰会聚焦工业和物联网暨汽车电子两大市场领域,展示前沿性的赋能
    的头像 发表于 11-21 11:08 727次阅读
    安富利邀您共赴2025<b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>创新<b class='flag-5'>技术</b>峰会深圳站

    完成两笔重要收购

    日前,半导体宣布已完成对Aviva Links和Kinara的收购,进一步推进智能边缘的汽车连接和人工智能创新。
    的头像 发表于 11-04 09:36 719次阅读

    飞凌嵌入式亮相技术日杭州站:共探技术,共谋发展

    2025年9月9日,技术日巡回研讨会在杭州顺利举办。飞凌嵌入式作为金牌合作伙伴受邀出席,并同步开展视频直播活动,与线上线下观众一
    的头像 发表于 09-12 08:06 6989次阅读
    飞凌嵌入式<b class='flag-5'>亮相</b><b class='flag-5'>恩</b>智<b class='flag-5'>浦</b><b class='flag-5'>技术</b>日杭州站:共探<b class='flag-5'>技术</b>,共谋发展

    启扬智能受邀亮相「2025技术巡回研讨会」

    2025年9月9日技术日巡回研讨会在杭州举办,本次研讨会聚焦前沿性的赋能技术、覆盖汽车电子架构、ADAS、智能工业、电力和能源管理、
    的头像 发表于 09-09 17:49 1483次阅读
    启扬<b class='flag-5'>智能</b>受邀<b class='flag-5'>亮相</b>「2025<b class='flag-5'>恩</b>智<b class='flag-5'>浦</b><b class='flag-5'>技术</b>巡回研讨会」

    与吉利汽车研究院成立联合创新实验室,共创汽车智能化未来

    半导体宣布,与吉利汽车研究院成立联合创新实验室,深化双方合作,聚焦智能化汽车技术,携手创新,助力吉利汽车智能化战略加速落地。 吉利汽车
    的头像 发表于 07-04 16:07 2320次阅读

    「2025创新技术峰会」飞凌嵌入式亮相上海首站

    2025年5月14日,【2025年创新技术峰会】首站登陆上海,飞凌嵌入式作为(NXP)金牌合作伙伴受邀参会,聚焦“工业与物联网”
    的头像 发表于 05-15 13:38 1067次阅读
    「2025<b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>创新<b class='flag-5'>技术</b>峰会」飞凌嵌入式<b class='flag-5'>亮相</b>上海首站

    启扬智能受邀参加2025技术峰会

    2025年5月14日创新技术峰会在上海举行,本次峰会聚焦前沿性的赋能技术,覆盖汽车电子架构、ADAS、汽车电气化、车载信息娱乐系统、智能
    的头像 发表于 05-14 17:34 934次阅读
    启扬<b class='flag-5'>智能</b>受邀参加2025<b class='flag-5'>恩</b>智<b class='flag-5'>浦</b><b class='flag-5'>技术</b>峰会

    米尔诚邀您参加2025NXP峰会

    2025年创新技术峰会暨技术日研讨会焕新登场!一场流动的技术盛宴,走进行业重镇,展示前沿技术
    的头像 发表于 05-08 08:08 932次阅读
    米尔诚邀您参加2025<b class='flag-5'>恩</b>智<b class='flag-5'>浦</b>NXP峰会

    智能家电创新方案一文看尽 智能家电技术日给你答案

      科技赋能,将会让我们日常的家居生活变得多智能?让我们一起到 “智能家电技术日” 中找答案—— 在日前举办的“
    的头像 发表于 03-28 11:46 6406次阅读
    <b class='flag-5'>恩</b>智<b class='flag-5'>浦</b><b class='flag-5'>智能</b>家电创新方案一文看尽  <b class='flag-5'>恩</b>智<b class='flag-5'>浦</b><b class='flag-5'>智能</b>家电<b class='flag-5'>技术</b>日给你答案

    宣布收购NPU厂商Kinara

    半导体公司近日宣布,已正式签署最终协议,将收购高性能、低功耗且可编程离散神经处理单元(NPU)供应商Kinara。此次收购将显著增强
    的头像 发表于 02-18 14:29 1174次阅读

    开启中国战略新篇章

    全球领先的智能边缘系统供应商近期宣布,将在现有中国业务布局基础上,进一步整合中国区销售与市场、技术支持、质量管理、运营与供应链、以及全球新能源及驱动系统产品线,组成垂直的业务单元
    的头像 发表于 02-14 11:26 1130次阅读

    CES 2025有哪些亮点

    未来的智能世界会是什么样?相信逛完在2025国际消费电子展(CES)上的展台,就会找到答案!
    的头像 发表于 01-17 10:46 963次阅读

    半导体6.25亿美元收购TTTech Auto

    完成后,TTTech Auto的管理团队及其约1100名工程员工将正式加入的汽车团队。此次收购不仅将扩大恩智的人才队伍,还将为其带来丰富的汽车软件技术和市场资源。 据悉,TTT
    的头像 发表于 01-09 14:53 937次阅读

    创新解决方推动智能物流转型

    如果可持续性能够在各物流公司之间无缝整合,会产生什么影响?物流公司现在正通过先进的智能物流技术来提高效率并减少对环境的影响。凭借一套全面的解决方案 (包括RAIN RFID、NTAG、
    的头像 发表于 12-20 16:55 1175次阅读

    2.425亿美元!收购汽车技术公司

    当地时间12月17日,半导体(NXP Semiconductors)宣布将以 2.425亿美元现金收购美国SerDes初创公司 Aviva Links。
    的头像 发表于 12-18 15:59 948次阅读