0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

科技云报道:大模型的火烧到了AI服务器上

科技云报到 来源:jf_60444065 作者:jf_60444065 2023-07-27 08:50 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

科技云报道原创。

大模型的纷争已经随着各大入局者公布产品后,热度逐渐退去,但是由大模型带来的产业链高频共振,已经传递了算力层。

表现最为激烈的,就是AI服务器市场。大模型带来的算力需求,直接引发了一波AI服务器抢购潮和涨价潮。

据《证券时报》报道,一家检测企业透露,他们在去年6月购买的8台AI服务器到今年三月已经涨价到130万每台,到现在价格飙升至160万每台。不到一年的时间,价格涨幅近20倍。

另外,AI服务器需求量大涨也直接引发了上游材料PPO(聚苯醚,用作高速覆铜板增强材料)的抢购潮,此前有业内相关人士坦言,由于全球PPO主流厂商仅一家,随着AI服务器的放量,PPO未来很有可能成为产业链上的紧缺环节之一。

在这样的背景下,AI服务器厂商扩产的消息也层出不穷。

鸿海集团旗下负责AI服务器业务的鸿佰科技就曾被曝出规划新增五到六条生产线,以应对AI服务器客户要求的消息。

市场火热度可见一斑,这也直接点燃了资本市场。

从1月份开始,以浪潮信息、中际旭创、工业富联为首的AI服务器概念股扶摇直上,多次涨停,甚至连长期亏损的寒武纪,股价都一路飘红。

爆火的“AI服务器”

AI服务器是什么?

AI服务器是一种专门设计用于执行人工智能(AI)、机器学习(ML)、深度学习(DL)等计算密集型任务的高性能服务器。

AI服务器通常配备有高效能的中央处理器CPU)、图形处理器(GPU)、张量处理器(TPU)或专用的AI加速器,以及大量的内存和存储空间。

在异构方式上,AI服务器可以为CPU+GPU、CPU+FPGA、CPU+TPU、CPU+ASIC或CPU+多种加速卡。

具体的设计和配置可以根据需要进行大量并行处理的具体任务来进行调整。

目前,使用比较广泛的AI服务器是CPU+GPU。这也与传统的服务器区分开来。

据悉,传统服务器主要以CPU为算力提供者,但是在运作的过程中需要引入大量分支跳转中断处理,这使得CPU的内部结构复杂,并不能满足AI时代的需求。

而采用GPU并行计算的AI服务器,单卡核心数达到上千个,擅长处理密集型运算应用,如图形渲染、计算视觉和机器学习。

上述提及的检测企业使用的AI服务器,基础配置就包括8颗英伟达A100GPU和80G存储器。

AI服务器对于AI、ML和DL的计算密集型任务来说非常有用。主要功能包括:

大数据处理:AI服务器能够处理和分析大量数据,这是训练AI和ML模型的关键。

并行计算:由于AI和ML算法需要对大量数据进行复杂的计算,AI服务器通常使用可以并行处理大量数据的硬件,如GPU。

存储和内存:AI服务器通有大量的存储空间和内存,以便存储和处理大量的数据。

网络能力:AI服务器需要高速和低延迟的网络连接,以便快速传输大量的数据。

其实,这也解释了为什么在大模型热浪后,会引发AI服务器的抢购浪。大模型中包含着海量的数据参数、训练、运行都需要更多的计算资源来处理,这就需要更高性能的AI服务器来支持。

当然,这一次AI服务需求大涨最直接的原因是大模型时代的到来,但是实际上,AI服务器在这个节点爆发,与AI技术、大数据的发展都有关。

总的来说,AI服务器的爆火可以归结为以下几个关键因素。

首先,大数据的崛起。现代社会的每个角落,无论是社交媒体、电子商务还是互联网搜索,都在产生大量的数据。

这些数据需要通过复杂的算法进行分析和解读,以发现有用的模式和信息,而AI服务器就能提供足够的计算能力来处理这些任务。

其次,AI和ML的普及也推动了AI服务器的需求。AI和ML现在已经广泛应用于各种行业,包括医疗保健、金融、零售和交通等。

这些领域的进步需要强大的计算能力来处理和分析数据,训练和运行复杂的AI和ML模型。

最后,云计算和边缘计算的发展也为AI服务器的爆火提供了动力。

云计算使得企业和组织能够无需购买和维护昂贵的硬件就能获得强大的计算能力,而边缘计算则需要在接近数据产生地点的服务器上进行数据处理和分析。

AI服务器国内市场格局

AI服务器市场在过去的几年里一直在持续增长,到现今,在大模型的加持下,AI服务器市场盘子越来越大。

据北京研精毕智信息咨询发布的最新数据显示,2022年全年,全球AI服务器行业市场出货量达到85万台,同比增长约11%,到2023年中旬,AI服务器市场出货量接近60万台,相比上年同期增长约39%。

未来,随着自然语言处理和图像、视频等AI大模型的发展,算力需求的持续增长,预计到今年年底,全球AI服务器市场规模将超过200亿美元。

到2025年,预计市场出货量将提升至190万台左右,2022-2025年期间年平均增长率达41.2%。

就具体产业链来说,AI服务器产业链上游为CPU、GPU、内存和硬盘等核心零部件,以及数据库、操作系统和基础管理软件等软件供应;下游为应用市场,包括互联网、云计算和数据中心服务商等。

目前,主导市场的是一些主要的AI服务器制造商,包括华为、浪潮、联想和中科曙光等,这些公司的服务器被广泛应用于AI和ML的研究和商业应用。

不过,值得注意的是,浪潮信息于近日发布了一份营收净利润双双下滑的半年度业绩预告。

其中,浪潮信息2023年上半年扣非净利润同比下滑88%-99%。对此,浪潮信息方面称,2023年上半年,受全球GPU及相关专用芯片供应紧张等因素的影响,营业收入出现下滑。

实际上,有行业人士分析,在AI服务器大火的背景下,浪潮信息业绩不及预期,深层次原因还是在于传统服务器行业整体不景气,而目前浪潮信息AI服务器实际所占比例并不大。

浪潮信息此前曾表示,总体来看,公司AI服务器的整体业务占比在上升。AI服务器需求大涨带来的业绩,或许能在浪潮信息2023年年报才能体现。

不过,根据IDC发布的《2022年第四季度中国服务器市场跟踪报告Prelim》,目前,在整个服务器市场(涵盖AI服务器和传统服务器)浪潮份额依旧以28.1%领先,但相比于去年30.8%的份额,还是有所下滑。

其实这也与说明一点,传统CPU服务器行业受到AI的影响,市场逐渐萎靡。未来以AI服务器为代表的异构服务器或是大势所趋。

在应用市场,数据显示,全球市场中以Microsoft、Google、Meta和AWS为代表的四家北美云端供应商采购量相对比较高。

2022年末,Microsoft以接近20%的采购量占据当年首位;Google、Meta和AWS采购量占比排在之后,分别达到17%、15%和14%。

在国内,随着科技厂商入局大模型已经大模型创业的兴起,AI算力基础设施的加快建设,对AI服务器的采购量占比也在相应升高。

2022年年末,字节跳动的AI服务器采购量大幅度提高,市场占比达到6%。

然而,市场也面临着一些挑战。首先,是能源消耗的问题。尽管AI服务器的性能在不断提高,但其能耗也在增加。这对于环保和电力供应来说都是一个问题。

其次,AI和ML的快速发展和变化要求服务器制造商必须持续投入研发,以确保他们的产品能够满足最新的需求。

关于未来,国内的AI服务器市场有很大的潜力。随着AI、ML和DL的进一步发展和应用,预计对AI服务器的需求将继续增长。

此外,随着5G物联网技术的普及,未来在边缘计算领域对AI服务器的需求将会增加。

总的来说,尽管市场面临着一些挑战,但AI服务器的快速发展和广泛应用表明,这是一个充满活力和潜力的市场。

【关于科技云报道】

专注于原创的企业级内容行家——科技云报道。成立于2015年,是前沿企业级IT领域Top10媒体。获工信部权威认可,可信云、全球云计算大会官方指定传播媒体之一。深入原创报道云计算、大数据、人工智能、区块链等领域。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 服务器
    +关注

    关注

    13

    文章

    10093

    浏览量

    90890
  • AI
    AI
    +关注

    关注

    89

    文章

    38121

    浏览量

    296676
  • 大模型
    +关注

    关注

    2

    文章

    3442

    浏览量

    4969
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    DeepSeek模型如何在服务器上部署?

    随着大型语言模型(LLM)的应用日益普及,许多开发者和企业希望将像DeepSeek这样的优秀模型部署到自己的服务器,以实现私有化、定制化
    的头像 发表于 10-13 16:52 569次阅读

    硅谷GPU服务器是什么意思?使用指南详解

    硅谷GPU服务器本质是一种IaaS(基础设施即服务)产品,它将物理服务器的GPU资源通过虚
    的头像 发表于 06-16 09:41 419次阅读

    基于RAKsmart服务器AI模型实时推理方案设计

    面对高并发请求、严格的响应延迟要求及波动的业务负载,传统本地化部署的算力瓶颈愈发显著。RAKsmart服务器凭借其弹性计算资源池、分布式网络架构与全栈AI加速能力,为AI
    的头像 发表于 05-13 10:33 466次阅读

    AI 推理服务器都有什么?2025年服务器品牌排行TOP10与选购技巧

    根据行业数据,AI推理服务器的性能差异可以达到10倍以上。比如,用普通服务器跑一个700亿参数的大模型,可能需要30秒才能出结果,而用顶级服务器
    的头像 发表于 04-09 11:06 7361次阅读
    <b class='flag-5'>AI</b> 推理<b class='flag-5'>服务器</b>都有什么?2025年<b class='flag-5'>服务器</b>品牌排行TOP10与选购技巧

    如何在RAKsmart服务器实现企业AI模型部署

    AI模型的训练与部署需要强大的算力支持、稳定的网络环境和专业的技术管理。RAKsmart作为全球领先的服务器托管与计算服务提供商,已成为企
    的头像 发表于 03-27 09:46 762次阅读

    利用RAKsmart服务器托管AI模型训练的优势

    AI模型训练需要强大的计算资源、高效的存储和稳定的网络支持,这对服务器的性能提出了较高要求。而RAKsmart服务器凭借其核心优势,成为托管AI
    的头像 发表于 03-18 10:08 525次阅读

    服务器数据恢复—如何预防服务器故障与恢复服务器数据!

    服务器常见故障: 硬件故障:磁盘损坏、电池故障等。 软件问题:操作系统崩溃、未知的程序运行错误等。 病毒破坏:勒索病毒加密、删除服务器数据等。 不可控力量;服务器浸水、火烧、机
    的头像 发表于 03-11 12:36 816次阅读

    Manus掀起AI热潮,服务器面临新挑战

    近日,一款名为Manus的AI产品在网络掀起波澜,被誉为“全球首款真正意义的通用AIAgent”。Manus的火爆不仅展现了AI技术的巨大潜力,也凸显了
    的头像 发表于 03-07 10:30 577次阅读

    如何确保服务器的DeepSeek-R1模型安全?

    确保服务器DeepSeek-R1模型的安全性,需要从多个方面入手,以下是一些关键措施: 1、使用安全防护工具 Amazon Bedrock Guardrails:AWS提供了Bed
    的头像 发表于 02-12 13:15 1010次阅读

    独立服务器服务器哪个快一些?

    独立服务器服务器哪个快一些?在数字服务部署中,独立服务器
    的头像 发表于 02-05 10:08 802次阅读

    储存服务器与传统存储的区别 储存服务器数据恢复方法

    服务器,即服务提供商的服务器。这些服务器通常位
    的头像 发表于 02-01 10:02 2242次阅读

    采用华为 Flexus 服务器 X 实例部署 MQTT 服务器完成设备

    一、前言 1.1 开发需求 这篇文章讲解: 采用华为最新推出的 Flexus 服务器 X 实例 EMQX 服务器,搭建 MQTT 服务器
    的头像 发表于 12-26 18:12 1004次阅读
    采用华为<b class='flag-5'>云</b> Flexus <b class='flag-5'>云</b><b class='flag-5'>服务器</b> X 实例部署 MQTT <b class='flag-5'>服务器</b>完成设备<b class='flag-5'>上</b><b class='flag-5'>云</b>

    GPU加速服务器怎么用的

    GPU加速服务器是将GPU硬件与计算服务相结合,通过服务提供商的平台,用户可以根据需求灵活
    的头像 发表于 12-26 11:58 853次阅读

    GPU服务器租用费用贵吗

    计算领域,GPU服务器因其强大的计算能力和图形处理能力,被广泛应用于多个领域。然而,对于许多企业和个人开发者来说,GPU服务器的租用
    的头像 发表于 12-19 17:55 1115次阅读

    GPU服务器租用多少钱

    GPU服务器的租用价格受多种因素影响,包括服务提供商、GPU型号和性能、实例规格、计费模式、促销活动以及地域差异等。下面,AI部落小编为您整理GPU
    的头像 发表于 12-09 10:50 1215次阅读