0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

利用全志A733平板构建端侧DeepSeek算力平台

全志在线 来源:全志在线 2025-02-13 10:18 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着DeepSeek 的蒸馏技术的横空出世,端侧 SoC 芯片上运行大模型成为可能。那么端侧芯片跑大模型的效果如何呢?本文将在全志 A733 芯片平台上部署一个 DeepSeek-R1:1.5B 模型,并进行实测效果展示。 端侧平台环境

设备:全志A733平板

系统:Android 15

DDR:8GB LPDDR5 @2400MHz

Flash:128GB UFS3.0

测试模型:Deepseek-R1-Distill-Qwen-1.5B

b4382098-e920-11ef-9310-92fbcf53809c.png

首先,我们测试AI经典哲学问题“你是谁?”

实测视频:

b47fcbb4-e920-11ef-9310-92fbcf53809c.gif

输入运行命令之后可看到模型运行起来了,此时我们就可以开始和Deepseek对话了。

从实拍视频可以看到,这个输出速度基本可以满足正常对话的交互体验。

然后我们要求Deepseek“快速写一段代码计算1-9999的和”

实测视频如下:

b4d47ce0-e920-11ef-9310-92fbcf53809c.gif

可以看到,Deepseek会先对题目进行分析,他很快就分辨出了这是一个经典的等差数列求和问题,并给出了计算公式。

然后,可以看到在没有指定编程语言的情况下,Deepseek默认使用python写出了计算代码。

最后,Deepseek对整个解题思路进行了归纳总结。

我们再尝试解一个一元二次方程:“求解方程x^2+4x+4=0”

实测视频如下:

b5150d1e-e920-11ef-9310-92fbcf53809c.gif

同样,Deepseek也是快速理清了题意,判别出了这是一个解一元二次方程的题目,并给出了求解公式。

然后Deepseek知道先对方程进行重根判别,判别出这道题是只有一个重根的。

最后,Deeepseek 将题目代入公式进行求解,马上便得出了正确的计算结果。

经测试,可以得出结论是Deepseek-R1-Distill-Qwen-1.5B 是可以在全志A733芯片平台的平板电脑上较流畅地运行的,并且可以让Deepseek拥有中学生级别的逻辑推理能力。而这才是一个开始。后续,随着量化技术的不断发展,模型的体积和计算复杂度将进一步降低,从而更好地适应端侧设备的资源限制。未来,我们期待 DeepSeek 在更多场景中发挥其强大的功能,为用户提供更加智能和便捷的体验。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    462

    文章

    53554

    浏览量

    459304
  • 全志
    +关注

    关注

    25

    文章

    303

    浏览量

    54474
  • DeepSeek
    +关注

    关注

    2

    文章

    824

    浏览量

    2822

原文标题:【实测】用全志A733平板搭建一个端侧Deepseek算力平台

文章出处:【微信号:gh_79acfa3aa3e3,微信公众号:全志在线】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    湘军,让变成生产

    脑极体
    发布于 :2025年11月25日 22:56:58

    新品 | 视美泰发布基于A733平台的新一代八核工控主板GK-73A

    在工业智能化加速演进的今天,高性能、高可靠性的工控主板成为推动行业变革的核心引擎。近日视美泰正式发布了一款性能卓越的八核工业级主板——GK-73A。该主板搭载高性能A733八核处理
    的头像 发表于 11-19 10:47 708次阅读
    新品 | 视美泰发布基于<b class='flag-5'>全</b><b class='flag-5'>志</b><b class='flag-5'>A733</b><b class='flag-5'>平台</b>的新一代八核工控主板GK-73<b class='flag-5'>A</b>

    V861系列芯片推动AI视觉应用落地

    V861系列智能视觉处理芯片,以运力、双维减耗为核心设计理念,通过异构计算架构与AI-ISP硬件单元的深度协同,在保证高性能的同时显著优化系统资源消耗,同时形成最新低功耗解决方
    的头像 发表于 11-18 15:32 563次阅读
    <b class='flag-5'>全</b><b class='flag-5'>志</b>V861系列芯片推动<b class='flag-5'>端</b><b class='flag-5'>侧</b>AI视觉应用落地

    A733:高性能八核AI处理器,智能终端优选

    电子发烧友网综合报道 科技不久前发布的投资者关系活动记录表显示,公司正积极打造序列化芯片平台,并推出了包括A733在内的高性能产品。基于RISC-V架构内核,
    的头像 发表于 10-20 08:12 6640次阅读
    <b class='flag-5'>全</b><b class='flag-5'>志</b><b class='flag-5'>A733</b>:高性能八核AI处理器,智能终端优选

    什么是AI模组?

    未来,腾视科技将继续深耕AI模组领域,全力推动AI边缘计算行业的深度发展。随着AI技术的不断演进和物联网应用的持续拓展,腾视科技的AI模组将在更多领域发挥重要作用,实现实时、安
    的头像 发表于 09-19 15:26 1157次阅读
    什么是AI<b class='flag-5'>算</b><b class='flag-5'>力</b>模组?

    什么是AI模组?

    未来,腾视科技将继续深耕AI模组领域,全力推动AI边缘计算行业的深度发展。随着AI技术的不断演进和物联网应用的持续拓展,腾视科技的AI模组将在更多领域发挥重要作用,实现实时、安
    的头像 发表于 09-19 15:25 435次阅读
    什么是AI<b class='flag-5'>算</b><b class='flag-5'>力</b>模组?

    瑞莎推出基于A733处理器的单板计算机Cubie A7A

    科技合作伙伴瑞莎计算机(Radxa) 今日发布基于 A733处理器平台的单板计算机——
    的头像 发表于 08-20 11:37 2070次阅读

    科技携手Blackview推出AI大屏旗舰平板MEGA 2 WiFi

    在AI技术持续渗透消费电子终端的大趋势下,平板市场正加速从“工具属性”向“智能伙伴”转型。近日,专注于智能终端研发的创新型科技品牌Blackview携手科技,正式推出其旗下首款搭载
    的头像 发表于 04-21 17:24 1342次阅读

    DeepSeek推动AI需求:800G光模块的关键作用

    随着人工智能技术的飞速发展,AI需求正以前所未有的速度增长。DeepSeek等大模型的训练与推理任务对的需求持续攀升,直接推动了服务
    发表于 03-25 12:00

    【一文看懂】什么是

    随着物联网(IoT)、人工智能和5G技术的快速发展,正逐渐成为智能设备性能提升和智能化应用实现的关键技术。什么是
    的头像 发表于 02-24 12:02 3036次阅读
    【一文看懂】什么是<b class='flag-5'>端</b><b class='flag-5'>侧</b><b class='flag-5'>算</b><b class='flag-5'>力</b>?

    视觉芯片V821接入DeepSeek和豆包视觉大模型

    上周,生态的小伙伴们成功在A733和T527的SoC平台上实现了
    的头像 发表于 02-21 09:27 3634次阅读

    DeepSeek驱动AI市场升温,智中心利用率望提升

    据多位业内人士透露,DeepSeek在业界的迅速部署与应用,为AI市场带来了新的热潮。自年后开工两周以来,设备租赁及采购的咨询量显著
    的头像 发表于 02-19 14:00 709次阅读

    软硬协同优化,安谋科技新一代“周易”NPU实现DeepSeek-R1高效部署

    优化的架构设计,其beta版本在2024年底已面向早期用户开放评估测试,并获得了广泛认可与积极反馈。 预计今年上半年,这款备受期待的 NPU 产品将正式亮相市场,届时将为更多用户带来突破性的
    发表于 02-14 10:52 297次阅读
    软硬协同优化,安谋科技新一代“周易”NPU实现<b class='flag-5'>DeepSeek</b>-R1<b class='flag-5'>端</b><b class='flag-5'>侧</b>高效部署

    【实测】用A733平板搭建一个Deepseek平台

    ​ 随着DeepSeek 的蒸馏技术的横空出世, SoC 芯片上运行大模型成为可能。那么芯片跑大模型的效果如何呢?本文将在
    发表于 02-13 10:19

    DeepSeek对芯片的影响

    DeepSeek模型,尤其是其基于MOE(混合专家)架构的DeepSeek-V3,对芯片的要求产生了深远影响。为了更好地理解这一影响,我们可以从几个方面进行分析。一.MOE架构对
    的头像 发表于 02-07 10:02 1629次阅读
    <b class='flag-5'>DeepSeek</b>对芯片<b class='flag-5'>算</b><b class='flag-5'>力</b>的影响