AI+低延迟低带宽，解决巡检机器人控制和视频传输难题

巡检机器人现如今正慢慢取代传统的人工巡检，成为巡检领域的主力军。

在机器人中，只有大量采用不同类型的传感器技术，才能追求类人化的意识、行为、动作、功能和生物感知特征，同时具有人所不能及的独特优势和场景适应能力。

而图像处理模块的存在，则是让机器人具备识别、检测周边物体的能力，让其能够实现精准操作、避障等功能。

这些AI功能慧视光电开发的Viztra-HS063 AI图像处理板就可以实现，板卡采用RK3588s开发而成，作为RockChip全新一代旗舰AIoT处理器，它具备8nm LP 制程，搭载八核64位CPU，主频高达2.4GHz。内置AI加速器NPU，可提供6Tops算力，支持主流的深度学习框架。经过我司开发，植入检测算法，基于输入的可见光或者红外视频流实现对周边目标的检测识别。

将机器人和板卡深度结合，例如在铁路巡检中，小巧的机器人在轨道中滑行巡检，AI板卡就能够实时进行AI检测识别，精准找到一颗颗松动的螺栓，遗留的垃圾等，效率比人工巡检高出好几倍。

板卡整体尺寸为55*40*10.67mm左右，重量仅24.5g（不含散热器），小巧精致的外形不会占用过多的设计空间。设计双模拟输入接口，一路MIPI接口，提供多种选择，适应不同行业。

此外，在机器人作业时，高清视频的采集、编解码、传输一直是一个难点。该板卡能够集成LLSM低延迟低带宽流媒体传输系统，在延迟方面，板卡能够实现编解码5ms的极致压缩，整个采集、编解码、传输全流程延迟控制在100ms以内。实现低延迟控制巡检机器人进行远程作业。

在带宽控制方面，能够通过高效的编码算法和信号优化，以最低500K带宽占用控制多个机器人进行作业，同时回传高清视频，这在偏远地区多设备作业环境中，能够有效增强巡检机器人的稳定性。

AI参数指标

性能指标
跟踪帧率	60 Hz（随相机输入帧率，最高可支持到100Hz）
最小跟踪目标	2×2 像素（质心跟踪） 8×8 像素（相关跟踪）
跟踪精度	≤ 1 像素
跟踪速度	≥ 64 像素/帧
最小目标对比度（质心目标）	≥ 5%
最大跟踪目标数量（多目标跟踪）	≤ 64
识别帧率	25 Hz
最小识别目标	10×10 像素
识别性能(基于开源数据集：VisDrone2019-DET-test-dev)	0.616（mAP@0.5）
功能参数
支持的跟踪算法	质心跟踪、相关跟踪、多目标跟踪、智能跟踪
支持的检测算法	AI识别、质心搜索、模板匹配、运动目标检测
图像压缩编码格式	H.264、H.265
视频流输出格式	RTSP、UDP、RTMP、HLS等
视频流可配置参数	码率、I帧间隔、QP值
控制交互方式	RS422/RS232/UDP/TCP
硬件接口/参数
视频输入	1路 MIPI(需定制适配)，2路 CVBS(PAL)
视频输出	1路 网络
串口	1路 RS422，1路 UART
网络	1路 百兆网口(默认输出RTSP视频流)
内存容量	32 G（可定制扩展）
视频压缩存储能力	≥ 2h（码率4M）
机械/电气参数
功耗	< 6W
工作电压	12V DC ± 2V
外形尺寸	55mm×40mm
环境适应性
工作温度	-20℃ ～ +60℃
存储温度	-20℃ ～ +65℃