0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

关于云知声开源全栈语音交互方案概念详解

云知声 来源:djl 作者:云知声 2019-08-08 16:40 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

其实现在外面好多合作伙伴都说我们特别‘独’,不过等你们的东西做出来,大家就不会这么说啦。”云知声联合创始人、芯片负责人李霄寒经常用这句话作为开头来鼓励自己的芯片团队尽快完成 Turnkey 整体音箱方案。因为在 5 月份云知声首款面向物联网AI 芯片—— UniOne 的发布会上,在 UniOne 上实现 Turnkey 音箱方案并将其整体开源,已经作为一个重大举措发布了。

谈起之前和合作伙伴的合作,李霄寒还是比较感慨的,云知声之所以能成为国内唯一实现 IVM (智能硬件模组)在白电领域大规模出货的 AI 公司,其中最关键的一条就是云知声提供了软硬件云+端一体化解决方案,为客户提供了一站式解决方案。但是这种模式,让很多希望和云知声展开合作的技术方案公司感觉云知声不太愿意和大家一起玩,所以有人半开玩笑半认真地说云知声比较“独”。

但是另一方面,李霄寒认为前两年的“独”,恰恰是对合作伙伴的负责。因为面向智能家居实现 AI 落地,牵涉到非常多的环节,比如需要积累可以量产化的结构经验;比如需要通过引擎、硬件平台选型以及系统优化,满足家电厂商整体的功耗要求;再比如适配云知声引擎,并在价格和性能方面达到最佳配置的通用芯片选型。这些都需要经过团队之间日常的紧密的合作,有时候甚至需要针对某些硬件特点做相应的引擎代码级别修改,才能真正实现最佳效果。

“如果仅仅提供一个引擎给自己的合作伙伴,再提供一些 SDK 层面的适配和支持,其实对自己的合作伙伴,包括对自己的团队,都是不负责任的。因为大家资源都是有限而宝贵的,引擎原厂没有足够的硬件、系统和产品经验,是无法高效支撑合作伙伴,最终大家做了很多合作,可能只是一场热闹,而无法做到量产出货。”这是李霄寒的结论。

正是在这种思想的指导下,云知声一面提供着 IVM 的整体解决方案,一面把自己在 IVM 实际落地场景下积累的经验和参数,落实到自有 AI 芯片 UniOne 的设计中,期望通过芯片最大可能地把家居场景下的关键部分进行固化,再将该芯片之上的全栈语音交互进行开源,大大降低技术门槛、缩短上市时间,从而确保合作伙伴与云知声的合作都有收获。

“不过这么做压力很大”,作为资深金庸迷,李霄寒有时候在内部开玩笑,说基于 UniOne 整体开源交互方案出来之前,自己经常想起《倚天屠龙记》里面赵敏说的那两句话“周公恐惧流言日,王莽礼谦下士时”,不过这也更加促进了自己领导的芯片团队加班加点。

碎片化IoT市场 VS基于UniOne的统一战线

兵无常势,水无常形, UniOne 出来后,云知声也进入到自己的“芯时代”,远讲降噪的 2Mic、4Mic 算法的各个参数,离线唤醒达到最佳唤醒率/误唤醒率的阈值,离线识别命令的模型大小和反应速度,都已经调到了最佳状态并且固化在 UniOne 中。在这种情况下,和合作伙伴一起做,就在一个非常稳固并且高起点地基础上了。面向很多潜在地客户,云知声均有一套经过验证过的参数,可以保证最终产品的性能,如果后续云知声算法有升级,也可以通过刷新 UniOne 中的固件来确保效果。

与此同时, UniOne 上目前实现的音箱整体交互方案也将开源。大家可以先感受一下当前的效果。

“ Turnkey 方案的开源,必将大大促进整体智能硬件产品的开发”,谈及这点,李霄寒信心满满。原因主要来源于以下三个方面:

一、 智能硬件的产品经理非常稀缺,尤其是懂语音交互设计的产品经理。语音交互(VUI)与之前屏幕为主要展示的图形界面交互(GUI)差别非常大,前者是扁平结构,一句话直达系统任何一个图形界面,可以做任何一个操作。而后者是树形结构,需要一步步点击。这两种交互各有优势,而VUI 目前市面上人才不多,又由于其扁平结构的特性,在设计的时候,需要从系统整体层面来考虑,而不是简简单单一个 App 层面。如此总总,都大大增加了 VUI 设计难度。

“产品交互设计如果都不好,最终开发的产品效果就可想而知了。”而作为云知声创始团队的李霄寒,在十多年前就在 Motorola 中国研究中心从事人机交互相关的研究工作,从 Motorola 手机上的语音交互到云知声车载到格力空调、斐讯音箱,李霄寒带领云知声团队积累了丰富的 VUI 设计和开发经验,而这些经验凝结而成的整体语音交互方案,将随着 UniOne 一起作为 Turnkey 方案整体开源,这一切将大大降低行业门槛。

二、 语音交互方案开源将大大缩短开发周期。作为一个系统级的功能,语音交互方案将处理音频驱动,处理与系统其他应用的交互,处理各个案件和唤醒事件,而且必须足够健壮稳定,这些都随着云知声开源方案得到解决。合作伙伴可以只做浅层次的定制化改造,比如唤醒词修改;也可以做深层次开发,比如基于云知声架构框架增加自己的对话 Session ;也可以在看懂整体方案情况下,完全重写。

三、 云知声经过考验的实施团队,提及云知声的竞争优势,很多客户都对云知声的服务表示认可,这与云知声有一支经验丰富并且善于和客户配合的实施团队密不可分。而在“芯时代”,这支团队将为愿意采用云知声 UniOne 的合作伙伴提供整体开源方案的技术支持,包括代码培训、工具开发等,尽一切可能降低合作伙伴熟悉整体开源方案的学习曲线陡峭度。

正如在 UniOne 芯片发布会上李霄寒所强调的,IoT 是一个碎片化的市场,面对这个碎片化的市场,如何以一个高效的方式应对,是云知声,也是云知声的合作伙伴需要认真面对并深度思考的。现在云知声给出了自己的回答,通过凝结自己场景落地经验的 UniOne 芯片,将其上的全栈语音交互方案进行开源,结成统一战线。各个合作伙伴可以在开源方案上将精力更多地放在自己熟悉的细分市场定制化方向,更快更好更多的出货。而云知声聚焦在自己性能改进和芯片迭代,更高性能更低成本。

“9月份,大家一起来”,李霄寒非常高兴自己终于可以在9月份的 UniOne Turnkey 方案开源研讨会上甩掉戴在自己和云知声头上两年多的“独”的帽子了。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    463

    文章

    54419

    浏览量

    469218
  • 语音交互
    +关注

    关注

    3

    文章

    355

    浏览量

    29213
  • 云知声
    +关注

    关注

    0

    文章

    328

    浏览量

    9464
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    智科技语音交互插件上线ClawHub

    核心突破:填补生态空白近日,智科技自主研发的语音交互插件,包含ASR(自动语音识别)与TTS(语音合成)正式通过ClawHub官方审核并接
    的头像 发表于 04-08 17:55 1148次阅读

    曙光AI平台解锁政企AI新效能

    AI风口席卷政企,能扎进实际场景的实战型AI才是政企刚需!行业空谈AI概念时,曙光AI平台已将
    的头像 发表于 04-07 15:29 361次阅读

    与AMD ROCm Lab签署战略合作协议

    3月25日,江苏科技有限公司(以下简称“”)与南京超威
    的头像 发表于 04-01 11:21 818次阅读

    与嘉会医疗达成战略合作

    大模型及 AI 技术为支撑,开启在智慧医疗领域的深度协作,共同探索科技赋能医疗服务的创新模式。联合创始人兼CTO梁家恩博士,嘉会医
    的头像 发表于 02-06 09:05 2541次阅读

    推出医疗领域专家大模型“山海·医大模型5.0”

    刚刚,正式推出医疗领域专家级大模型全新力作——“山海・医大模型5.0”。这一里程碑式的发布,标志着其医疗大模型完成了从“智能工具”到“临床协作者”的关键跨越,以更深刻的医学理解
    的头像 发表于 12-24 18:12 4637次阅读

    荣膺2025年浙江省服务业领军企业

    。此次获评,标志着已深度融入浙江省数字经济创新提质进程,也充分彰显了其AGI技术在长三角地区的广泛落地与应用成效。
    的头像 发表于 11-13 17:49 1419次阅读

    联合行业伙伴推出多款智能硬件解决方案

    近日,智慧生活产品线迎来一系列新产品和解决方案升级,大模型全面进入产品线,让AGI从“技术概念”切实走进“日常好用”的智慧化生活。
    的头像 发表于 10-29 13:47 1084次阅读

    与广西医保局达成战略合作

    近期,智能科技股份有限公司(以下简称“”,股票代码:9678.HK)与广西壮族自治区
    的头像 发表于 09-09 10:45 1089次阅读

    携手TCL空调焕新智能家电体验

    “空调开24度,新风打开”——刚打完篮球的小涛对着客厅远处的TCL空调发出指令,而空调无需联网仍精准执行操作。这一离线状态下的智能响应场景,正是TCL空调与联手研发的“基于端
    的头像 发表于 08-25 13:53 1360次阅读

    与瓦努阿图政府签署谅解备忘录

    近期,与瓦努阿图共和国政府(经其驻华大使馆代表)(「瓦努阿图政府」)正式签署关于人工智能海外实施合作和访问邀请的谅解备忘录(「备忘录」),并将依据备忘录开启紧密战略合作,展开具体
    的头像 发表于 07-18 17:28 1318次阅读

    在港交所成功上市

    近日,智能科技股份有限公司(以下简称“”)于香港联合交易所主板挂牌上市,股份代号:0
    的头像 发表于 07-03 17:41 1187次阅读

    AGI龙头企业港股上市,市值达147亿港元

    为147.44亿港元。   图:创始人董事长CEO黄伟博士在现场致辞表示:从今天起,我们将以香港为支点,将中国AGI产品带向全世界——用更敏捷的创新、更好的商业化和更开放的心胸,让人类智慧与机器智能共振全球!  
    的头像 发表于 06-30 11:44 3767次阅读
    AGI龙头企业<b class='flag-5'>云</b><b class='flag-5'>知</b><b class='flag-5'>声</b>港股上市,市值达147亿港元

    与商汤科技达成战略合作

    近日,智能科技股份有限公司(以下简称“”)与上海商汤智能科技有限公司(以下简称“商汤
    的头像 发表于 06-20 14:52 1134次阅读

    携手南宁轨道打造智慧生活新范本

    报事报修系统基于兽牙智能体平台,定制开发了专属智能体。系统全面覆盖公共报修、家政服务、知识问答、投诉建议四大应用场景,真正实现了“语音下单—自动派单—实时反馈”的
    的头像 发表于 06-09 14:48 1244次阅读

    大象机器人携手进迭时空推出 RISC-V 开源六轴机械臂产品

    识别联调。 进迭时空致力于为智能机器人提供完整优化的RISC-V AI软硬件解决方案,第一代RISC-V AI CPU芯片K1已完成AI视觉感知、AI语音处理、自动避障、路径规划
    发表于 04-25 17:59