0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

SmartCow的Apollo音频/视频AI工程套件

星星科技指导员 来源:嵌入式计算设计 作者:嵌入式计算设计 2022-07-11 10:00 次阅读

市场研究估计,自然语言处理市场将从 2021 年的 209.8 亿美元增长到 2028 年的超过 1270 亿美元。同样,人工智能视觉市场预计将从 2020 年的 70.4 亿美元增长到 1444.6 亿美元。

显然,人工感官知觉正在兴起。

对于构建视觉和对话计算系统的开发人员,Smart Cow Apollo AI 工程套件考虑了 NVIDIA Jetson Xavier NX 计算模块的 21 TOPS 性能和四个麦克风、两个扬声器端子、两个 3.5 毫米电话插孔、一个 8MP 摄像头模块、一个 OLED 显示器,以及一个 128 GB NVMe SSD 进入等式。

Apollo 套件的特色NVIDIA Jetson Xavier NX 计算模块与 NVIDIA Riva、DeepStream 和开箱即用的 JetPack SDK 可加速创建基于边缘 AI 的自动语音识别 (ASR) 和自然语言处理 (NLP) 解决方案。

两个 PVA 视觉加速器、两个深度学习加速器、H.264 和 H.265 视频编码器/解码器增强了这种性能。高速数据传输还可以使用 8 GB 到 16 GB 的 128 位 LPDDR4x 内存,运行速度高达 60 Gbps,或者通过使用 16 GB 的板载 eMMC 5.1 闪存使事情更持久。

当然,Apollo Kit 的独特之处在于它周围的一切:

内置音频编解码器支持其 4 个 MEMS 麦克风

8MP IMX179 摄像头模块支持多种视觉应用

2.08 英寸 OLED 显示屏显示状态和其他读数

随附的 128 GB NVMe SSD 预装了上述 NVIDIA SDK

底架使其能够直立以进行符合人体工程学的工程

SmartCow Apollo 音频/视频工程套件在行动:

希望开发基于感知的应用程序原型的开发人员可以通过设备正面的 40 针接头或侧面的 USB 端口访问 Apollo Kit 资源。套件上还有一个以太网 RJ45 插孔,供希望在项目中添加网络元素的用户使用。

通过系统访问,工程师几乎可以立即开始利用 NVIDIA SDK 提供的所有软件功能。不仅 Riva、DeepStream 和 JetPack SDK 提供了简化应用程序开发的框架,在许多情况下,SmartCow 还在套件上实施了可立即运行的演示和用例优化的 AI 模型,以帮助您起步。

例如:

ASR示例利用 NVIDIA Citrinet 模型转录口语(语音到文本)

基于开源 NLTK 模型的 NLP 示例应用程序分析文本数据以确定输入文本的正面或负面程度,该应用程序将在 OLED 屏幕上显示一头表情牛。此设置还支持命名实体识别 (NER),这是一个从句子中确定命名实体的过程。

第三个聊天机器人演示利用 Chatterbot 开源 GitHub 存储库在 Jetson 上创建两个互相通信的聊天机器人实例。用户可以运行其他 NLP 任务,例如对聊天机器人生成的文本进行情感分析,并在生成的文本上使用文本到语音。

该套件随附的其他软件包括用于视听 AI 应用程序的 Gstreamer (webRTC) 开源多媒体框架示例和主机 Ubuntu Linux 操作系统

Apollo 音频/视频 AI 工程套件入门

Apollo 音频/视频 AI 工程套件的尺寸为 81 x 69 x 125 毫米,因此您真正需要的只是工作台和开发 PC 上的足够空间。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • Linux
    +关注

    关注

    87

    文章

    11017

    浏览量

    206952
  • 操作系统
    +关注

    关注

    37

    文章

    6351

    浏览量

    122057
  • AI
    AI
    +关注

    关注

    87

    文章

    26909

    浏览量

    264691
收藏 人收藏

    评论

    相关推荐

    RA6M3 AI 套件参考平台数据手册

    电子发烧友网站提供《RA6M3 AI 套件参考平台数据手册.rar》资料免费下载
    发表于 05-14 18:12 0次下载
    RA6M3 <b class='flag-5'>AI</b> <b class='flag-5'>套件</b>参考平台数据手册

    联发科发布天玑AI开发套件,赋能终端生成式AI应用

    联发科近日推出了全新的天玑AI开发套件,旨在为合作伙伴打造一站式解决方案,以加速终端生成式AI应用的开发。这款套件集合了四大核心模块,为AI
    的头像 发表于 05-10 11:19 267次阅读

    炬芯科技赵新中:无线音频SoC的AI算法未来和应用

    的平台。 炬芯科技算法研发中心高级总监赵新中受邀出席,于电声元器件及芯片专题论坛发表以《无线音频SoC的AI算法未来和应用》为主题的演讲,分享了炬芯科技的音频AI算法研究、应用经验和最
    的头像 发表于 04-10 11:13 197次阅读
    炬芯科技赵新中:无线<b class='flag-5'>音频</b>SoC的<b class='flag-5'>AI</b>算法未来和应用

    阿里巴巴推出全新AI图生视频模型EMO

    近日,阿里巴巴集团智能计算研究院宣布推出了一款革命性的AI图片-音频-视频模型技术——EMO。据官方介绍,EMO是一种先进的音频驱动肖像视频
    的头像 发表于 03-05 11:00 743次阅读

    Adobe在Premiere Pro中引入AI音频编辑功能

    Adobe近日宣布,其视频剪辑软件Premiere Pro正式引入全新的AI驱动音频编辑功能。这一创新旨在解放剪辑师的双手,减少繁琐的操作,进一步提升工作效率。
    的头像 发表于 01-19 15:31 363次阅读

    ADI将采用SambaNova套件,加速AI转型进程

    ADI与SambaNova Systems共同宣布,ADI将采用SambaNova套件,以此引领公司在全球范围内的AI转型。此举旨在推动AI在公司内部的广泛应用。
    的头像 发表于 01-11 13:55 297次阅读

    如何在RZ/V2L评估板套件上使用AI SDK

    本文章介绍如何在RZ/V2L评估板套件上使用AI SDK。
    的头像 发表于 10-27 15:53 538次阅读
    如何在RZ/V2L评估板<b class='flag-5'>套件</b>上使用<b class='flag-5'>AI</b> SDK

    【KV260视觉入门套件试用体验】四、KV260 视觉入门套件和固件更新

    【KV260视觉入门套件试用体验】四、KV260 视觉入门套件和固件更新 一、KV260 视觉 AI 入门套件 Xilinx® Kria™ KV260 视觉
    发表于 10-17 08:28

    【KV260视觉入门套件试用体验】Vitis-AI加速的YOLOX视频目标检测示例体验和原理解析

    本文将介绍如何使用Vitis-AI加速YOLOX模型实现视频中的目标检测,并对相关源码进行解读。由于演示的示例程序源码是Vitis-AI开源项目提供的,本文演示之前会介绍所需要的准备工作。演示之后
    发表于 10-06 23:32

    【KV260视觉入门套件试用体验】3.PL端视频采集与AI识别测试测试

    【KV260视觉入门套件试用体验】3.PL端视频采集与AI识别测试测试大信 ALSET (QQ:8125036) 感谢安富利科技和烧友烧网给予的XilinxKria KV260视觉AI
    发表于 09-18 01:51

    英特尔通过AI参考套件加速AI发展

    优化的AI参考套件 旨在 助力开发者和数据科学家跑出创新“加速度” 最新动态 得益于英特尔与埃森哲的长期合作,英特尔现推出了一套共计34个的开源AI参考套件,帮助开发者和数据科学家更快
    的头像 发表于 07-28 19:45 610次阅读
    英特尔通过<b class='flag-5'>AI</b>参考<b class='flag-5'>套件</b>加速<b class='flag-5'>AI</b>发展

    英特尔AI参考套件,助力企业高效运行AI工作负载

    优化的AI参考套件旨在助力开发者和数据科学家跑出创新“加速度”。 最新动态:得益于英特尔与埃森哲的长期合作,英特尔现推出了一套共计34个的开源AI参考套件,帮助开发者和数据科学家更快、
    的头像 发表于 07-27 13:05 241次阅读
    英特尔<b class='flag-5'>AI</b>参考<b class='flag-5'>套件</b>,助力企业高效运行<b class='flag-5'>AI</b>工作负载

    如何把视频转换成音频 视频转换成音频的原理是什么

    视频文件包含了一系列连续的图像帧,每帧都由像素组成。而音频文件则包含一系列连续的声音样本。在视频转换成音频时,首先需要将视频中的图像帧和声音
    发表于 06-30 15:15 1014次阅读

    树莓派音频视频播放

    树莓派音频视频播放
    的头像 发表于 06-21 11:41 467次阅读

    百度Apollo伴你“童”行,打造极致体验的新出行生活方式

    6月3日, 百度Apollo 携手 百度地图 、 昆仑芯 以及 首钢园 共同举办的“ AI汽车生活节 ”再度来袭。值此首钢园召开2023年中国科幻大会、六一儿童节来临之际,百度Apollo将前沿
    的头像 发表于 06-07 01:45 436次阅读
    百度<b class='flag-5'>Apollo</b>伴你“童”行,打造极致体验的新出行生活方式