0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AIBOX-1684X:把大语言模型“装”进小盒子

Firefly开源团队 2024-04-20 08:02 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

AIBOX-1684X支持主流大模型私有化部署,算力高达32TOPS,同时也支持CNN、RNN、LSTM等传统网络架构,支持TensorF NNX和Darknet等深度学习架构,并支持自定义算子开发。支持Docker容器化管理技术。适用于智能监控、AI教学、算力服务、边缘计算、大模型私有化部署、数据安全和隐私保护等场景。

458d6b92-fea9-11ee-9118-92fbcf53809c.jpg

全面的人工智能私有化部署

语言大模型

支持Transformer架构下超大规模参数模型,如LLaMa2、ChatGLM、Qwen等大型语言模型的私有化部署。

视觉大模型

支持ViT、Grounding DIN0、SAM等视觉大模型的私有化部署。

AI绘画

支持AIGC领域的Stable DiffusionV1.5图像生成模型的私有化部署。

传统网络架构

支持CNN、RNN、LSTM等传统网络架构。

深度学习框架

支持多种深度学习框架,包括TensorFlow、PyTorch、MXNet、PaddlePaddle、ONNX和Darknet,并支持自定义算子开发。

Docker容器化

支持Docker容器化管理技术,可方便的进行镜像部署。

32TOPS超高算力AI处理器

搭载SOPHON算能AI处理器BM1684X,拥有八核ARM Cortex-A53,最高主频2.3GHz,采用12nm工艺制程;拥有高达32Tops(INT8)算力,或16TFLOPS(FP16/BF16)算力、或2Tops(FP32)高精度算力,支持主流编程框架,可广泛应用于云端及边缘应用的人工智能推理。

多路视频AI处理性能

最高支持32路1080P H.264/H.265的视频解码,32路1080P高清视频全流程处理(解码+AI分析),满足视频流人脸检测、车牌识别等各类AI应用场景的需求。

强大的网络通讯能力

支持双路1000Mbps以太网 ,高速稳定的网络通讯方式,满足不同应用场景需求。

45b6b038-fea9-11ee-9118-92fbcf53809c.jpg

高效散热,工艺精美

配置工业级全金属外壳,铝合金结构导热,顶盖外壳侧面采用条幅格栅设计,保证外部空气流通,高效散热,保障在高温运行状态下的运算性能和稳定性。顶盖采用多孔六边形设计, 简洁美观。整机小巧精致,运行稳定,满足各种工业级的应用需求。

45bb4b02-fea9-11ee-9118-92fbcf53809c.jpg

国产化定制,产品自主可控

可实现100%国产化硬件方案定制,技术完全自主可控,工业级产品质量,稳定的供货周期,满足各种行业的需求。

完善的开发资料

提供配套的源代码、教程、技术资料和开发工具,让开发变得更加简单方便。

广泛的应用场景

广泛适用于智能监控、AI教学、算力服务、边缘计算、大模型私有化部署、数据安全和隐私保护等场景。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 语言模型
    +关注

    关注

    0

    文章

    570

    浏览量

    11255
  • 深度学习
    +关注

    关注

    73

    文章

    5590

    浏览量

    123905
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    低成本AI边缘计算盒子DIY:基于迅为RK3568和开源模型,轻松玩转智能识别

    低成本AI边缘计算盒子DIY:基于迅为RK3568和开源模型,轻松玩转智能识别
    的头像 发表于 11-12 13:42 1295次阅读
    低成本AI边缘计算<b class='flag-5'>盒子</b>DIY:基于迅为RK3568和开源<b class='flag-5'>模型</b>,轻松玩转智能识别

    国产超新星|EA500I PRO智能工作站:小盒子大能量,千元级解锁大模型

    随着AI从小模型向大模型的加速渗透,算力已成为企业构建智算能力的核心关键。对于渴望切入AI赛道的中小企业,既具备成本优势又能快速部署的边缘计算盒子,无疑是理想的选择;但市场上超100T算力的边缘计算
    的头像 发表于 11-11 10:53 1127次阅读
    国产超新星|EA500I PRO智能工作站:<b class='flag-5'>小盒子</b>大能量,千元级解锁大<b class='flag-5'>模型</b>

    Qwen3-VL 4B/8B全面适配,BM1684X成边缘最佳部署平台!

    算能BM1684X上完成Qwen3-VL4B/8B模型的适配,推理速度13.7/7.2tokens/s,使其成为边缘部署多模态大模型的最佳选择。近日,阿里千问正式开源Qwen3-VL系列的4B和8B
    的头像 发表于 10-16 18:00 1696次阅读
    Qwen3-VL 4B/8B全面适配,BM<b class='flag-5'>1684X</b>成边缘最佳部署平台!

    中科创达与吉利汽车、NVIDIA联合发布创新产品AIBOX

    产品AIBOX。该方案依托中科创达滴水AIOS和NVIDIA DRIVE AGX车载计算平台,首次实现7B大模型在车端实时流畅运行,打造了真正的AI座舱,标志着汽车产业正式进入AI大模型实车量产时代。
    的头像 发表于 09-10 09:05 833次阅读

    产品案例 | 遛“狗”新方式,盒子来帮忙

    当一只机器狗被一个巴掌大的小盒子操控,躲避障碍、跟随指令完成转身、停止等动作时,围观人群纷纷发出惊叹:“这么小的盒子,居然能‘溜’机器狗?”。这个“小盒子”,正是机器狗的“智慧大脑”,它凭借强大
    的头像 发表于 09-08 12:13 3945次阅读
    产品案例 | 遛“狗”新方式,<b class='flag-5'>盒子</b>来帮忙

    HCAI玩具盒子产品介绍

    HCAI玩具盒子提供PCBA服务、云端中台服务、大模型部署对接服务、定制化模型微调以及免费的3D外壳设计服务。
    发表于 08-15 14:17 1次下载

    【HZ-T536开发板免费体验】1 - 开箱测试

    。在接下来的一个月时间,我将测试该开发板的相关功能。 开箱 我拿到的盒子和第一批拿到开发板的朋友不同,里面有个小盒子是开发板。 此次测试的开发板是MINI的,所以非常小巧。虽然盒子不同,但是里面
    发表于 07-16 19:41

    AIBOX 产品矩阵:支持主流大模型的私有化部署,满足个性化 AI 应用需求

    AIBOX系列产品具备高性能、低功耗、环境适应性强等特点,算力覆盖6-157TOPS,通过搭配多样化深度学习算法,体积小巧,能够支持主流大模型的私有化部署,为多个智慧行业进行数字化赋能。目前
    的头像 发表于 06-25 16:32 1427次阅读
    <b class='flag-5'>AIBOX</b> 产品矩阵:支持主流大<b class='flag-5'>模型</b>的私有化部署,满足个性化 AI 应用需求

    AIBOX 新成员,搭载 RK3588S 芯片全新上线

    AIBOX产品矩阵再添新成员——AIBOX-3588S,支持AI大模型私有化部署,支持32GBLPDDR5超大内存,广泛适用于边缘计算、大模型私有化部署、智能安防、智能家居、智能工业等
    的头像 发表于 05-07 16:33 2386次阅读
    <b class='flag-5'>AIBOX</b> 新成员,搭载 RK3588S 芯片全新上线

    盒子上编译sophon-sail报错的原因?

    盒子上编译sophon-sail,下载了对应版本的sophon-sail源码,执行cmake -DBUILD_PYSAIL=OFF .. 报错: linaro@bm1684:/data/sail
    发表于 04-22 09:28

    自制1个指纹保险箱,不到100元就能拥有!

    | 实用至上,点亮便利生活,此前就一直想着给小朋友做一个小盒子,正好借这个机会忙里偷闲参与到活动当中,再体验一下电子 DIY 的乐趣。 本次制作了一个稍微实用价值的指纹开锁小盒子,旨在为日常生活中的物品收纳提供更安全、便捷的解决方案。 1、设计
    的头像 发表于 04-18 16:30 766次阅读
    自制1个指纹保险箱,不到100元就能拥有!

    AIBOX 全系产品已适配 DeepSeek-R1

    国产AI大模型DeepSeek以出色的性价比和高效的模型技术,迅速成为全球AI关注的焦点。Firefly开源团队率先实现AIBOX系列产品对DeepSeek-R1的全面适配。R1模型
    的头像 发表于 02-08 17:30 945次阅读
    <b class='flag-5'>AIBOX</b> 全系产品已适配 DeepSeek-R1

    语言模型管理的作用

    要充分发挥语言模型的潜力,有效的语言模型管理非常重要。以下,是对语言模型管理作用的分析,由AI部
    的头像 发表于 01-02 11:06 573次阅读

    AI大语言模型开发步骤

    开发一个高效、准确的大语言模型是一个复杂且多阶段的过程,涉及数据收集与预处理、模型架构设计、训练与优化、评估与调试等多个环节。接下来,AI部落小编为大家详细阐述AI大语言
    的头像 发表于 12-19 11:29 1215次阅读

    AIBOX应用】通过 NVIDIA TensorRT 实现实时快速的语义分割

    NVIDIA系列AIBOXAIBOX-OrinNano和AIBOX-OrinNX均搭载NVIDIA原装JetsonOrin核心板模组,标配工业级全金属外壳,铝合金结构导热,顶盖外壳侧面采用条幅格栅
    的头像 发表于 12-18 16:33 1133次阅读
    【<b class='flag-5'>AIBOX</b>应用】通过 NVIDIA TensorRT 实现实时快速的语义分割