0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

恩智浦公司得意新作智能语音技术亮相

NXP客栈 来源:NXP客栈 作者:NXP客栈 2021-05-18 14:31 次阅读

“Hey NXP”、”哈啰恩智浦”……一声又一声的问候在宁静的办公室里格外惹人注目,原来是恩智浦公司又一呕心沥血的得意新作——智能语音技术(VIT)。

智能语音技术(Voice Intelligent Technology – VIT)基于最先进的深度学习语音识别技术,是一款完整的唤醒词/语音命令解决方案。

VIT在MCUXpresso SDK中支持的恩智浦设备上免费提供,目前已经可以支持英语,而中文、土耳其语、西班牙语等其他语言也正如火如荼地开发测试当中。

VIT功能包括

唤醒词引擎(Wake Word Engine - WWE):它使用了训练所需要并且已记录的触发词文件。

在训练阶段使用数据增强技术来整合数据集中的可变性。

利用神经网络分类器来确定提取的音素序列是否与目标关键字对应。

不需要音频数据集的语音命令引擎(Voice Commands Engine - VCE)。

目标语音命令在脱机过程中被转换为单词符号序列,VCE在运行时确定提取的音素序列是否对应于特定的单词符号序列以及命令。

一个模型可以支持从大量词汇当中所挑选的30个语音命令。

简而言之VIT可以

通过Text2Model工具创建的自定义命令

自定义触发字选项

低延迟检测(<200ms)

VIT现已经支持的平台有

i.MX RT600系列:Cortex-M33内核,HiFi4 DSP处理器,评估板为MIMXRT685-EVK

i.MX RT1060系列:Cortex-M7内核,评估板为MIMXRT1060-EVK

VIT可以利用语音服务来唤醒并控制物联网装置或家用设备。目前的VIT版本可以支持唤醒词以及利用Text2Model工具所产生的语音命令,如下图所示↓↓↓

d3adfdf8-b4d1-11eb-bf61-12bb97331649.jpg

唤醒词模型是从关键词档案数据库所创建,而语音命令模型则是由Text2Model工具所产生。目前SDK中所内建的VIT函式库可以侦测 “Hey NXP” 关键词以及12个在VIT_Voice_Commands.h当中所预设的语音命令。

这次VIT的发布包含了以下的部分:

Lib/libVIT_PLATFORM_VERSION.a :平台可以选HIFI4或Cortex-M7

Lib/VIT.h :描述VIT公用的API

Lib/VIT_Model.h :VIT模型档案包含了唤醒词和语音命令的描述

VIT_Voice_Commands.h :列举VIT函式库所支持的语音命令

Lib/Inc :涵盖VIT公用接口定义的文件夹

ExApp/VIT_ExApp.c :VIT范例

VIT提供丰富API以供使用者操作:

VIT_SetModel:储存VIT模块的地址,并确认此模块是否能被VIT函式库所支持

VIT_GetMemoryTable:通知软件应用程序VIT函式所需要的内存。共定义四种不同的内存区块,Fast data / Slow data / fast coefficient /Temporary or scratch

VIT_GetInstanceHandle:设置并初始化VIT,所有的内存都被映像到子模块所需的缓冲区

VIT_SetControlParameters:设置或修改VIT的控制参数

VIT_Process:分析音频以辨识是唤醒词或语音命令

VIT_GetVoiceCommandFound:VIT读取命令编号与名称

VIT_GetModelInfo:辅助API,用来取得VIT模块的讯息

VIT_ResetInstance:辅助API,用来重置VIT模块

VIT_GetControlParameters:辅助API,用来取得VIT的控制参数

VIT_GetStatusParameters:辅助API,用来取得VIT的状态参数

以下为简单的API调用流程↓↓↓

d3cdb4a4-b4d1-11eb-bf61-12bb97331649.png

原文标题:免费提供!VIT智能语音技术:恩智浦深度学习应用又一得意之作!

文章出处:【微信公众号:NXP客栈】欢迎添加关注!文章转载请注明出处。

责任编辑:haq
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 恩智浦
    +关注

    关注

    14

    文章

    5714

    浏览量

    100770
  • 智能语音
    +关注

    关注

    10

    文章

    759

    浏览量

    48370
  • 深度学习
    +关注

    关注

    73

    文章

    5237

    浏览量

    119904

原文标题:免费提供!VIT智能语音技术:恩智浦深度学习应用又一得意之作!

文章出处:【微信号:NXP客栈,微信公众号:NXP客栈】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    车内语音识别技术智能驾驶中的应用与前景

    一、引言 随着智能驾驶技术的快速发展,车内语音识别技术逐渐成为智能驾驶领域的研究热点。语音识别
    的头像 发表于 02-19 11:46 248次阅读

    语音合成技术智能驾驶中的应用与挑战

    一、引言 随着智能驾驶技术的不断发展,人机交互变得越来越重要。语音合成技术作为人机交互的重要手段,在智能驾驶中发挥着越来越重要的作用。本文将
    的头像 发表于 02-02 10:34 182次阅读

    语音合成技术智能驾驶中的创新与应用

    一、引言 随着智能驾驶技术的不断发展,人机交互变得越来越重要。语音合成技术作为人机交互的重要手段,在智能驾驶中发挥着越来越重要的作用。本文将
    的头像 发表于 02-01 18:09 354次阅读

    语音合成技术智能驾驶中的应用与展望

    一、引言 随着科技的飞速发展,语音合成技术逐渐成为人机交互领域的重要分支。在智能驾驶环境中,语音合成技术更是发挥着不可或缺的作用。它不仅简化
    的头像 发表于 02-01 17:50 241次阅读

    语音数据集:智能语音技术的燃料与推动力

    随着人工智能技术的不断进步,语音技术作为人机交互的重要方式,正在逐渐渗透到我们的日常生活中。而语音数据集作为智能
    的头像 发表于 12-29 11:11 165次阅读

    语音数据集:开启智能语音技术的新篇章

    随着人工智能技术的飞速发展,语音数据集在推动智能语音技术的进步中发挥着越来越重要的作用。语音数据
    的头像 发表于 12-29 11:06 199次阅读

    语音数据集:智能语音技术的基石与挑战

    随着人工智能技术的飞速发展,语音技术已成为人机交互领域的重要突破口。语音数据集作为支撑语音技术
    的头像 发表于 12-28 11:28 319次阅读

    离线语音识别及控制是怎样的技术

    引言:  随着人工智能的飞速发展,离线语音识别技术成为了一项备受瞩目的创新。离线语音识别技术能够将人的
    发表于 11-24 17:41

    语音识别技术智能客服领域的应用与挑战

    一、引言 随着人工智能技术的不断发展,智能客服成为了许多行业的重要应用。语音识别技术作为智能客服的重要组成部分,对于提高客户满意度和提升企业
    的头像 发表于 10-25 10:37 349次阅读

    语音识别技术的应用及优化

    一、引言 语音识别技术是一种能够让计算机“听懂”人类语言的技术。随着科技的不断发展,语音识别技术的应用范围越来越广泛。本文将探讨
    的头像 发表于 10-10 17:26 999次阅读

    创龙科技位居头版,2023深圳elexcon电子展为智能化赋能!

    存储产品精彩亮相(展位号1K11),分享存储创新技术和客户应用案例。LPDDR5、UFS3.1作为公司重要战略规划产品亦于会上重磅首发。 ​ 慧智微(展位号1N20)现场展示了5G可重构的射频前端
    发表于 08-24 11:49

    LPC55S69 ARM TrustZone CORTECT-M33教程

    本实验的目的是使用ARM KEIL MDK工具包向您介绍Cortex™-M33处理器系列,该工具包采用μVision®集成开发环境。 在本教程结束时,您将自信地使用处理器和
    发表于 08-24 07:46

    语音标注平台是构建智能语音技术的重要基石

    随着人工智能技术的不断发展,智能语音技术正逐渐成为我们生活中不可或缺的一部分。而语音标注平台作为一种重要工具,为
    的头像 发表于 07-21 16:18 298次阅读

    如何开发智能家居语音控制方案

    挑战与应用 随着科学技术和人工智能的不断发展,智能生活已经深入生活各个方面,而AI语音控制作为智能化的前驱,其
    发表于 05-31 09:50

    语音识别技术的概念及应用前景

    力来进行识别和语义处理,一个常见的智能语音处理流程如下图所示。 ​ 启英泰伦是行业内首家将人工智能语音处理技术运用到芯片上的
    发表于 05-27 09:41