0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

利用全志A733平板构建端侧DeepSeek算力平台

全志在线 来源:全志在线 2025-02-13 10:18 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着DeepSeek 的蒸馏技术的横空出世,端侧 SoC 芯片上运行大模型成为可能。那么端侧芯片跑大模型的效果如何呢?本文将在全志 A733 芯片平台上部署一个 DeepSeek-R1:1.5B 模型,并进行实测效果展示。 端侧平台环境

设备:全志A733平板

系统:Android 15

DDR:8GB LPDDR5 @2400MHz

Flash:128GB UFS3.0

测试模型:Deepseek-R1-Distill-Qwen-1.5B

b4382098-e920-11ef-9310-92fbcf53809c.png

首先,我们测试AI经典哲学问题“你是谁?”

实测视频:

b47fcbb4-e920-11ef-9310-92fbcf53809c.gif

输入运行命令之后可看到模型运行起来了,此时我们就可以开始和Deepseek对话了。

从实拍视频可以看到,这个输出速度基本可以满足正常对话的交互体验。

然后我们要求Deepseek“快速写一段代码计算1-9999的和”

实测视频如下:

b4d47ce0-e920-11ef-9310-92fbcf53809c.gif

可以看到,Deepseek会先对题目进行分析,他很快就分辨出了这是一个经典的等差数列求和问题,并给出了计算公式。

然后,可以看到在没有指定编程语言的情况下,Deepseek默认使用python写出了计算代码。

最后,Deepseek对整个解题思路进行了归纳总结。

我们再尝试解一个一元二次方程:“求解方程x^2+4x+4=0”

实测视频如下:

b5150d1e-e920-11ef-9310-92fbcf53809c.gif

同样,Deepseek也是快速理清了题意,判别出了这是一个解一元二次方程的题目,并给出了求解公式。

然后Deepseek知道先对方程进行重根判别,判别出这道题是只有一个重根的。

最后,Deeepseek 将题目代入公式进行求解,马上便得出了正确的计算结果。

经测试,可以得出结论是Deepseek-R1-Distill-Qwen-1.5B 是可以在全志A733芯片平台的平板电脑上较流畅地运行的,并且可以让Deepseek拥有中学生级别的逻辑推理能力。而这才是一个开始。后续,随着量化技术的不断发展,模型的体积和计算复杂度将进一步降低,从而更好地适应端侧设备的资源限制。未来,我们期待 DeepSeek 在更多场景中发挥其强大的功能,为用户提供更加智能和便捷的体验。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    463

    文章

    54412

    浏览量

    469169
  • 全志
    +关注

    关注

    25

    文章

    316

    浏览量

    54991
  • DeepSeek
    +关注

    关注

    2

    文章

    837

    浏览量

    3396

原文标题:【实测】用全志A733平板搭建一个端侧Deepseek算力平台

文章出处:【微信号:gh_79acfa3aa3e3,微信公众号:全志在线】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    黑芝麻智能驾驶芯片华山A2000家族全新亮相,为物理AI时代构建底座

    华山A2000家族的全新阵容。作为专为下一代AI模型设计的高芯片平台A2000家族分别瞄准从座舱AI化到L4级Robotaxi的不同场
    的头像 发表于 04-20 19:33 1563次阅读
    黑芝麻智能驾驶芯片华山<b class='flag-5'>A</b>2000家族全新亮相,为物理AI时代<b class='flag-5'>构建</b><b class='flag-5'>算</b><b class='flag-5'>力</b>底座

    AI爆发!斯贝达栈自研技术,助力国产AI崛起

    江接受采访,分享了国产AI布局和产品市场拓展等话题。   栈式国产化AI方案   此次展会上,斯贝达电子带来
    的头像 发表于 04-14 16:51 5048次阅读

    边缘AI临界点:深度解析176TOPS香橙派AI Station的产业价值

    ,开发者利用AI Station的176TOPS,在机器人平台上运行模仿学习策略,控制机械臂完成精细操作[](https://hwcomputing.csdn.net
    发表于 03-10 14:19

    香橙派系列开发板适配OpenClaw教程

    ://localhost:18789/overview” 确认Status为Connected后,就可以进行对话了。 从高性能RK3588到高昇腾系列,再到如今高性价比系列
    发表于 02-25 18:29

    :智能设备的本地计算革命与未来图景

    前言随着物联网(IoT)、人工智能和5G技术的飞速演进,智能设备正从被动响应向主动感知、实时决策升级,而这一变革的核心驱动力之一,便是的崛起。作为将计算任务下沉至终端设备的创新
    的头像 发表于 01-22 10:41 1097次阅读
    <b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>算</b><b class='flag-5'>力</b>:智能设备的本地计算革命与未来图景

    应对AI、内存、功耗“三堵墙”困境,安谋科技Arm China “周易”X3给出技术锦囊

    AI大模型正加速从云端向边缘与渗透,然而,、内存、功耗等却成了制约其规模化落地的“高墙”。专为AI计算而生的神经网络处理器(NPU),成为破墙关键。安谋科技Arm China“
    的头像 发表于 12-18 13:45 526次阅读
    应对<b class='flag-5'>端</b><b class='flag-5'>侧</b>AI<b class='flag-5'>算</b><b class='flag-5'>力</b>、内存、功耗“三堵墙”困境,安谋科技Arm China “周易”X3给出技术锦囊

    湘军,让变成生产

    脑极体
    发布于 :2025年11月25日 22:56:58

    从CPU、GPU到NPU,美格智能持续优化异构计算效能

    的科技企业也在近期表示,将通过软件层创新大幅提升资源利用率。作为高AI模组和
    的头像 发表于 11-21 16:05 1299次阅读
    从CPU、GPU到NPU,美格智能持续优化异构<b class='flag-5'>算</b><b class='flag-5'>力</b>计算效能

    新品 | 视美泰发布基于A733平台的新一代八核工控主板GK-73A

    在工业智能化加速演进的今天,高性能、高可靠性的工控主板成为推动行业变革的核心引擎。近日视美泰正式发布了一款性能卓越的八核工业级主板——GK-73A。该主板搭载高性能A733八核处理
    的头像 发表于 11-19 10:47 1286次阅读
    新品 | 视美泰发布基于<b class='flag-5'>全</b><b class='flag-5'>志</b><b class='flag-5'>A733</b><b class='flag-5'>平台</b>的新一代八核工控主板GK-73<b class='flag-5'>A</b>

    V861系列芯片推动AI视觉应用落地

    V861系列智能视觉处理芯片,以运力、双维减耗为核心设计理念,通过异构计算架构与AI-ISP硬件单元的深度协同,在保证高性能的同时显著优化系统资源消耗,同时形成最新低功耗解决方
    的头像 发表于 11-18 15:32 1795次阅读
    <b class='flag-5'>全</b><b class='flag-5'>志</b>V861系列芯片推动<b class='flag-5'>端</b><b class='flag-5'>侧</b>AI视觉应用落地

    A733:高性能八核AI处理器,智能终端优选

    电子发烧友网综合报道 科技不久前发布的投资者关系活动记录表显示,公司正积极打造序列化芯片平台,并推出了包括A733在内的高性能产品。基于RISC-V架构内核,
    的头像 发表于 10-20 08:12 8253次阅读
    <b class='flag-5'>全</b><b class='flag-5'>志</b><b class='flag-5'>A733</b>:高性能八核AI处理器,智能终端优选

    什么是AI模组?

    未来,腾视科技将继续深耕AI模组领域,全力推动AI边缘计算行业的深度发展。随着AI技术的不断演进和物联网应用的持续拓展,腾视科技的AI模组将在更多领域发挥重要作用,实现实时、安
    的头像 发表于 09-19 15:26 2061次阅读
    什么是AI<b class='flag-5'>算</b><b class='flag-5'>力</b>模组?

    什么是AI模组?

    未来,腾视科技将继续深耕AI模组领域,全力推动AI边缘计算行业的深度发展。随着AI技术的不断演进和物联网应用的持续拓展,腾视科技的AI模组将在更多领域发挥重要作用,实现实时、安
    的头像 发表于 09-19 15:25 1026次阅读
    什么是AI<b class='flag-5'>算</b><b class='flag-5'>力</b>模组?

    瑞莎推出基于A733处理器的单板计算机Cubie A7A

    科技合作伙伴瑞莎计算机(Radxa) 今日发布基于 A733处理器平台的单板计算机——
    的头像 发表于 08-20 11:37 2782次阅读

    软通智中标韶关公共服务平台项目

    日前,软通动力旗下软通智中标《韶关公共服务平台(一体化
    的头像 发表于 05-22 16:19 1147次阅读