0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Intel跑步进入AI PC时代!13代酷睿支持160亿参数大模型、Arc显卡提速54%

E电子 来源:E电子 作者:E电子 2023-08-21 09:32 次阅读

生成式AI(AIGC)无疑是当下最热门的话题和应用,各家软硬件厂商都在全力投入。

作为拥有强大硬件、广泛生态的行业领袖,Intel也正在大力推动PC AIGC应用的落地,从硬件到软件提供全方位支持。

目前在PC平台上,Intel已发布的12/13代酷睿、Arc A系列显卡,以及即将发布的下一代酷睿,都能满足AIGC对于高算力的需求。

再加上软件生态的构建和模型的优化,AIGC场景在台式机、轻薄本、全能本、游戏本等设备上都能落地应用,从而大大提高热门的日常生活、工作效率。

其中,基于OpenVINO PyTorch后端的方案,通过Pytorch API,可以让社区开源模型很好地运行在Intel客户端处理器、集成显卡、独立显卡和专用AI引擎之上。

比如说,Stable Diffusion的实现Automatic1111 WebUI,已经能够通过上述方式,在Intel处理器、显卡上运行FP16浮点精度的模型,支持文生图、图生图、局部修复等功能。

wKgZomTiv4CAMaTWAAIpAHQW42I486.png

更进一步地,Intel通过模型优化,降低了模型对硬件资源的需求,进而提升了模型的推理速度,让社区开源模型能够很好地运行在PC上。

眼下,Intel 13代酷睿通过XPU加速、low-bit量化,以及其它软件层面的优化,可以让最高达160亿参数的大语言模型,通过BigDL-LLM框架运行在16GB及以上内存容量的个人电脑上。

已经验证过的模型包括但不限于:LLAMA/LLAMA2、ChatGLM/ChatGLM2、MPT、Falcon、MOSS、Baichuan、QWen、Dolly、RedPajama、StarCoder、Whisper等,并通过Transformers、LangChain API接口支持Windows、Linux操作系统

wKgaomTivqCATka3AAIB2Ja1ZtM095.png

即将发布的代号Meteor Lake的酷睿Ultra系列,更会成为PC AI历史上的重要里程碑。

酷睿Ultra它将通过分离式模块架构,集成名为“VPU”的独立AI加速单元,为PC用户提供AI驱动的新功能、新应用,比如Adobe Premiere Pro中的自动重新构图、场景编辑检测等等,还有更高效的机器学习加速。

目前,Intel正与PC产业伙伴合作,加速AI加速应用的落地和普及,未来后续基带产品也会进一步扩展AI能力。

另一方面,Intel Arc锐炫显卡通过驱动和补丁更新,已经可以较好地支持Stable Diffusion,性能提升效果相当显著。

Tom's Hardware就分别测试了Arc A770 16GB、Arc A750,使用了Automatic1111 WebUI OpenVINO。

在此之前,Arc A770 16GB、Arc A450的性能相比RTX 4060落后在20%左右,如今分别大幅提升了54%、40%,对比RTX 4060能分别领先25%、6%。

要知道,它俩的游戏性能其实远不如RTX 4060,但如今AI效率却更高,足可见Intel的硬件性能和软件优化相当给力。

再看看AMD显卡的表现,就更加凸显Intel的进步了,RX 6000系列的效率依然低得令人发指,RX 6800都只有Arc A750的一半多一点点。

wKgaomTivqGAPlhsAACz1rDeJpw367.png

wKgZomTivqKAWWCaAACw9JZcuEI480.png



审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • intel
    +关注

    关注

    19

    文章

    3452

    浏览量

    184785
  • AI
    AI
    +关注

    关注

    87

    文章

    26471

    浏览量

    264098
  • 大模型
    +关注

    关注

    2

    文章

    1543

    浏览量

    1139
  • AI PC
    +关注

    关注

    0

    文章

    97

    浏览量

    38
收藏 人收藏

    评论

    相关推荐

    贸泽电子开售支持图像处理和边缘AI加速的 Advantech VEGA-P110 PCIe Intel Arc A370M嵌入式GPU卡

    PCIe Intel® Arc A370M嵌入式GPU卡。这款全新的VEGA-P110 GPU卡采用表现出众的Intel® Arc显卡,可
    发表于 03-11 15:41 232次阅读

    【飞腾派4G版免费试用】仙女姐姐的嵌入式实验室之五~LLaMA.cpp及3B“小模型”OpenBuddy-StableLM-3B

    预训练语言模型。该模型最大的特点就是基于以较小的参数规模取得了优秀的性能,根据官网提供的信息,LLaMA的模型包含4个版本,最小的只有70亿
    发表于 12-22 10:18

    125.Intel英特尔第13处理器来了!24核心,5。8Ghz就问你耶不耶

    intel电脑配件电脑/办公
    小凡
    发布于 :2022年10月04日 15:25:51

    “十三香”来了!Intel 13国内上市 #硬声创作季

    Inte产品评测
    jf_49750429
    发布于 :2022年11月02日 19:56:23

    十三香来了!英特尔13首发开箱 #硬声创作季

    产品评测
    jf_49750429
    发布于 :2022年11月02日 20:07:29

    AMD Zen4劲敌!Intel 13来了:10月见 #硬声创作季

    Inte时事热点
    jf_49750429
    发布于 :2022年11月03日 01:06:12

    Intel 13内存曝光:相比AMD Zen4差点意思 #硬声创作季

    Inte时事热点
    jf_49750429
    发布于 :2022年11月03日 01:11:54

    索尼VAIO Pro 13处理器支持16GB内存吗

    Ram但由于系统描述:所有系统内存都是 焊接到电路板上。 要求该项目支持16GB内存以便焊接 母板?2.英特尔®™第4i3-4010U处理器3M高速缓存,1.70 GHz。
    发表于 11-20 11:31

    Intel公布2021年CPU架构路线图及封装技术

    Intel举办的架构日活动上,Intel公布2021年CPU架构路线图、下一核心显卡、图形业务的未来、全新3D封装技术,甚至部分2019年处理器新架构等技术战略。
    发表于 11-02 07:47

    凌华科技发布两款基于最新的英特尔® ™处理器的模块化电脑

    凌华科技发布基于第13英特尔® ™处理器的COM Express和COM-HPC计算模块提供高达24核的扩展计算能力以及工业级的稳定性用英特尔®性能混合架构,可实现高效率的边缘计
    发表于 02-15 10:30

    龙芯3A6000性能实测:媲美10i3、同频超越14i5

    昨天新一国产CPU龙芯3A6000正式发布。 按照官方的说法,其总体性能与英特尔2020年上市的第10四核处理器相当。 发布会上,龙芯中科公布了3A6000和
    发表于 11-29 10:44

    ARC-160逆变焊机电路图

    ARC-160逆变焊机电路图
    发表于 04-25 10:53 888次下载
    <b class='flag-5'>ARC-160</b>逆变焊机电路图

    Intel高管披露Arc显卡合作厂商?官方否认

    Intel高调宣布进军游戏显卡市场,明年初就会发布Xe HPG高性能架构的产品,命名为Intel Arc锐炫系列,首款代号“Alchemist”(早先内部名DG2)。 它完整
    的头像 发表于 09-26 14:42 1605次阅读
    <b class='flag-5'>Intel</b>高管披露<b class='flag-5'>Arc</b><b class='flag-5'>显卡</b>合作厂商?官方否认

    Intel Arc显卡可以双卡并行吗?

    Intel Arc显卡自然也不支持两块并行,但得益于Intel独家打造的Deep Link技术,它可以搭配12代酷睿的核显,加速特定工作。
    的头像 发表于 08-04 14:41 1224次阅读

    主流级显卡的新选择,Sparkle(撼与科技)Intel Arc A750兽人体验分享

    Arc A系列当中选一个性能不俗,能够满足生产力与游戏需求,价格方面又不会太高的显卡,那么我手上的这张Sparkle(撼与科技)的Intel Arc A750 兽人 OC
    的头像 发表于 12-26 09:29 251次阅读