开源鸿蒙硬件方案领跑者触觉智能
本文基于触觉智能IDO-EVB3588开发板,运行大模型。效果抢先看!
视频使用的主板采用瑞芯微RK3588处理器,是全新一代AloT高端应用芯片,采用8nm LP制程,搭载八核64位CPU,四核Cortex-A76和四核Cortex-A55架构,主频高达2.4GHz。
6TOPS AI算力,三核架构,支持int4/int8/int16/FP16/BF16/TF32;
支持H.265/H.264/AV1/VP9/AVS2视频解码, 最高8K60FPS;
支持 H.264/H.265视频编码, 最高8K30FPS;
支持HDMI2.1输出,最高8K@60Hz;
支持HDMI2.0 输入, 最高4K60FPS;
支持多摄像头输入;
双通道LVDS,支持到1080P@60Hz 大屏幕 ;
多屏异显;
两路独立的千兆以太网口,支持WAN口+LAN口 双IP ;
丰富的系统支持, Android 12,Ubuntu,鸿蒙OpenHarmony全面支持。


1、运行在开发板上可以通过CPU直接部署运行模型,可以在终端中直接对话:

视频效果如下所示:
CPU调用情况:

同时,通过调整模型,可以在NPU上部署运行大模型,3588开发板的NPU拥有6T的算力,可以加速模型运行。运行qwen1.8b模型占用情况如下

2、网页调用模型API
模型部署后可以暴露API供其他应用使用,例如Web网页调用API接口实现对话功能。

-
开发板
+关注
关注
26文章
6424浏览量
120920 -
触觉智能
+关注
关注
1文章
66浏览量
902 -
大模型
+关注
关注
2文章
3772浏览量
5273
发布评论请先 登录
瑞芯微RK3588 RKNN模型推理环境部署与功能测试技巧(上)
AI硬件选型必看!瑞芯微RV1126B/RK3562/RK3576/RK3588之NPU性能实测对比
国产RK182X算力协处理器 + RK3588实测,大模型“极速流畅”
从视觉检测到多模态交互:RK1820如何赋能下一代智能嵌入式设备?
OPi RK3588/RK3588S系列产品全面适配Openclaw,智能体“人人可及”时代正式开启
保障量产稳定!触觉智能完成多款产品LPDDR5内存适配
触觉智能RK3588行业主板通过OpenHarmony5.0 XTS认证
以触觉为桥,定义智能体验——PPS触觉传感技术赋能多领域创新
RK3506开发板Xenomai内核RT-Linux实时性系统适配教程与性能实测,实测仅7μs稳定延时
ALINX VD100低功耗端侧大模型部署方案,运行3B模型功耗仅5W?!
请问如何在RK3588上使用npu,用onnx模型来推理
运行kmodel模型验证一直报错怎么解决?
触觉智能RK3506星闪开发板规格书 型号IDO-EVB3506-V1参数详情
触觉智能EVB3588实测运行大模型,效果nice!
评论