0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

OpenAI断供API,国产大模型替代方案低成本迁移

Carol Li 来源:电子发烧友 作者:李弯弯 2024-06-27 09:04 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/李弯弯)日前,不少国内API开发者收到了来自OpenAI的邮件。邮件称,从7月9日起采取额外措施,阻止来自非支持国家和地区列表中的地区的API流量。根据OpenAI官网,支持访问API服务的国家和地区列表中总计188个国家和地区,不包括中国内地与中国香港。

这意味着,OpenAI宣布终止对中国开发者提供API服务。OpenAI终止对中国提供API服务,对一些通过接入OpenAI API做大模型或应用的企业会有影响,不过这对国产大模型的长远发展却也有积极意义,它反而促进国产大模型的自主研发,并带来更多应用机会。

国产大模型纷纷推出替代方案

随着OpenAI停止对中国提供API服务,国内大模型公司纷纷行动,上线“迁移计划”。如智谱,该公司第一时间在官微宣布,面向OpenAI API用户提供特别搬家计划,帮助用户切换至国产大模型,其 GLM 大模型号称全面对标 OpenAI 产品体系,且全链路技术自研、安全可控。

具体来看,智谱为开发者提供1.5亿Token(5000万 GLM-4 + 1亿 GLM-4-Air),从OpenAI 到 GLM 的系列迁移培训。对于高用量客户,智谱提供与OpenAI使用规模对等的Token赠送计划(不设上限),以及与 OpenAI 对等的并发规模,匹配高等级会员政策,专属搬家顾问及5人天技术专家支持,备案培训和辅助。

百度智能云千帆推出大模型普惠计划,称让用户0成本切换至国内调用量第一的大模型平台,场景更丰富、模型更全面、工具链更完整易用、更安全可靠。

具体来看,即日起为新注册企业用户提供0元调用服务:文心旗舰模型首次免费,赠送ERNIE3.5旗舰模型5000万Tokens包,主力模型ERNIE Speed/ERNIE Lite和轻量模型ERNIE Tiny持续免费 ;针对OpenAI迁移用户额外赠送与OpenAI使用规模对等的ERNIE3.5旗舰模型Tokens包。

同时,该计划还支持0元训练、0元迁移、0元服务。0 元训练:免费模型精调训练服务 0 元迁移:零成本 SDK 迁移工具;0 元服务:专家服务(迁移 & 使用指导)。

腾讯云宣布,即日起至2024年7月31日24时,将为新迁移企业用户免费赠送1亿腾讯混元大模型tokens(标记),并提供免费专属迁移工具和服务。目前,腾讯云提供混元Pro、Standard、Lite等多个不同版本和尺寸的模型,用户可任意选择。

阿里云百炼宣布,将为OpenAI API用户提供最具性价比的中国大模型替代方案,并为中国开发者提供2200万免费tokens和专属迁移服务。根据斯坦福最新公布的大模型测评榜单HELM MMLU,Qwen2-72B得分为0.824,与GPT-4并列全球第四。通义千问GPT4级主力模型Qwen-plus在阿里云百炼上的调用价格为0.004元/千tokens,仅为GPT-4的50分之一。

由李开复创立的AI大模型独角兽公司零一万物也发起“Yi API二折平替计划”,面向OpenAI用户推出平滑迁移至Yi系列大模型的服务。据介绍,目前注册使用Yi API的新客户,零一万物立即赠送100元额度,帮助用户完成平稳过渡;平台充值还将赠送50%到账额度,上不封顶。此外,零一万物API还将提供Prompt兼容调优服务支持。

百川智能宣布特别推出OpenAI 零成本迁移计划,将为参与用户免费赠送1 千万 token,同时宣布Assitants API 免费使用。据介绍,目前百川智能开放平台接口已完全兼容OpenAI API,支持零成本迁移,功能更丰富。借助百川技术专家随时答疑,开发者五分钟即可完成Api迁移。

少不了算力芯片的支持

国产大模型纷纷推出替代方案,这背后少不了需要算力芯片的支持。目前国内大模型训练基本使用英伟达GPU,英伟达的GPU因其强大的并行处理能力和高效的计算性能,被广泛应用于深度学习机器学习等需要大量计算资源的领域。

如阿里通义千问大模型,它包含多个不同规模的版本,Qwen-1.8B、Qwen-7B、Qwen-14B和Qwen-72B等,据了解,阿里通义千问大模型主要使用英伟达Tesla A100、Tesla A800、Tesla H100等GPU芯片,这些GPU具有较大的显存和强大的计算能力,能够满足大模型训练的需求。

百度文心一言主要基于英伟达的A100 GPU完成其高效的深度学习计算任务。A100 GPU采用了NVIDIA最新的Ampere架构,被广泛应用在各种AI模型和高性能计算场景中。A100 GPU在文心一言的构建和运行过程中,执行大规模并行处理任务,特别是在语义理解、语境关联及文本生成等领域内。

除此之外,百度也兼容其他公司的GPU,在英伟达A100、H100等训练AI用GPU遭遇进口管制的情况下,百度采用了将来自不同供应商的GPU集成到统一的计算集群中的策略,以训练大语言模型。

字节跳动大模型在训练过程中也是主要使用英伟达的GPU。据悉,字节跳动在2023年向英伟达订购了超过10亿美元的GPU产品,目前已经采购了10万块A100与H800加速卡,这两款GPU均属于英伟达的高性能计算产品线,非常适合用于深度学习、大模型训练等任务。

另外,像智谱、百川智能等也主要使用英伟达的GPU。智谱AI通过与优刻得等公司的合作,利用英伟达GPU构建超千卡规模的推理集群,以满足其大模型在文本、图片、视频等多场景下的大规模实时推理需求。

百川智能与鸿博股份的全资子公司英博数科合作,后者向百川智能提供的智算服务器,其单台所提供的算力规模和性能不低于英伟达H系列8卡智算服务器所有的同等算力。这意味着百川智能大模型的训练过程中,将直接使用到英伟达高性能的GPU资源。

除了使用英伟达GPU之外,一些国产大模型的训练和运行也使用国内的算力芯片,如华为、科大讯飞、月之暗面等。同时,海光信息、天数智芯、摩尔线程、沐曦、景嘉微等都已经推出和搭建可以支持大模型训练和推理的芯片、系统和智算集群。

写在最后

总的来说,OpenAI停止对中国开发者提供API服务,对于目前一些调用通过接入OpenAI API做大模型和AI应用的企业来说有所影响,不过,国内不少大模型厂商已经纷纷推出替代方案,虽然目前国产大模型较OpenAI有一定差距,不过随着更多的被使用,长远来看国产大模型将会逐步实现突破。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • API
    API
    +关注

    关注

    2

    文章

    2515

    浏览量

    67177
  • OpenAI
    +关注

    关注

    9

    文章

    1263

    浏览量

    10344
  • 大模型
    +关注

    关注

    2

    文章

    3879

    浏览量

    5303
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    国产 MCU 替代浪潮下,应广单片机的优势在哪

    近几年很多传统进口单片机缺货、涨价,越来越多方案公司转向国产替代。 应广这类国产通用 MCU,很适合中小型控制项目,几个明显优势: 架构简单,开发上手快,不用花大量时间熟悉复杂指令。
    发表于 05-18 15:59

    ACS712国产替代推荐:电流检测芯片选型指南

    一、为什么很多工程师开始寻找 ACS712 的国产替代方案? 在电机驱动、电源管理、BMS、电流保护以及工业控制系统中,ACS712 长期被用于低成本电流检测。该器件通过霍尔效应实现电
    的头像 发表于 05-15 15:43 222次阅读

    PT153S千兆网卡 完全PIN对PIN替代RTL8153E

    等方面具备显著优势。其国产化属性解决了进口芯片的供应链痛点,高集成度与低功耗设计适配更多场景需求,“即插即用”的特性提升了用户体验与部署效率,是当下千兆网卡芯片国产替代的优选产品,能够为企业提供高效、可靠、
    发表于 04-24 11:05

    国产替代STM32F103CBT6的32位MCU单片机参考方案

    针对STM32F103CBT6等MCU单片机长期存在的供应波动、价格上调及供应链不确定性,英尚为电子推出基于国产自主架构的32位MCU替代方案。英尚的32位MCU以软件全兼容为核心设计目标,实现零改
    的头像 发表于 04-23 16:17 260次阅读
    <b class='flag-5'>国产</b><b class='flag-5'>替代</b>STM32F103CBT6的32位MCU单片机参考<b class='flag-5'>方案</b>

    抛弃“天价”进口件!AI算力爆发下,SMB连接器如何靠“国产方案”省下 30% 硬成本

    在AI算力爆发的2026年,SMB射频连接器成为无线通信、车载T-Box及边缘计算设备中的关键一环。本文深入剖析高频高速趋势下,如何通过国产替代方案实现30%硬成本降低,同时保证信号完
    的头像 发表于 03-20 10:24 1021次阅读
    抛弃“天价”进口件!AI算力爆发下,SMB连接器如何靠“<b class='flag-5'>国产</b><b class='flag-5'>方案</b>”省下 30% 硬<b class='flag-5'>成本</b>?

    长江连接器(CJTconn)6大核心优势,助力进口连接器国产替代

    长江连接器(CJTconn)6大核心优势助力进口连接器国产替代—长江连接器—在连接器行业,曾经欧美日品牌曾长期占据主导地位,连接器交期动辄数月、价格居高不下、停产频发、定制响应迟
    的头像 发表于 02-13 11:50 585次阅读
    长江连接器(CJTconn)6大核心优势,助力进口连接器<b class='flag-5'>国产</b>化<b class='flag-5'>替代</b>

    Neway微波国产替代方案

    和零部件,在2-6周内完成定制产品的交付。技术兼容性适配无缝对接:支持原位替代TI、Murata等国际品牌,电气参数、尺寸、引脚定义无需调整,降低客户的替代成本,提高替代
    发表于 01-30 08:45

    Neway微波产品的国产替代方案

    替代Neway微波产品在技术兼容性方面进行了深度适配,确保国产替代方案能够无缝对接现有系统。例如,在电源模块替代中,Neway通过优化电
    发表于 12-18 09:24

    风华电阻:低成本与高稳定性家电应用

    风华电阻在家电应用中以低成本与高稳定性为核心优势,通过材料创新、工艺优化及严格认证,为家电提供高性价比、高可靠性的解决方案 ,具体分析如下: 一、低成本实现路径 材料替代与工艺优化 铜
    的头像 发表于 10-29 15:39 638次阅读

    如何评价OpenRouter这样的大模型API聚合平台?

    接口。 大模型时代商业模式大多数都是重资产,OpenAI、Anthropic谈论起来都是上亿美元的资本开支,不管是训练还是推理,建设数据中心成本高昂。 OpenRouter这样的转发商,相比之下资本投入就低了2个数量级。 有的人
    的头像 发表于 10-28 10:04 841次阅读

    NXP 1052 国产替代推荐?

    NXP 1052 国产替代推荐
    发表于 09-29 10:47

    高效设计,国产精品:BT5026——LM5026的优质Pin-to-Pin替代方案

    国产芯片替代方案
    的头像 发表于 09-02 14:50 1797次阅读
    高效设计,<b class='flag-5'>国产</b>精品:BT5026——LM5026的优质Pin-to-Pin<b class='flag-5'>替代</b><b class='flag-5'>方案</b>

    腾视科技大模型一体机解决方案低成本私有化落地,重塑行业智能应用新格局

    当大模型进入 “深水区”,私有化与低成本已成为企业选型的核心考量。腾视科技大模型一体机解决方案,用技术创新打破 “安全与成本不可兼得” 的困
    的头像 发表于 08-07 11:06 2095次阅读
    腾视科技大<b class='flag-5'>模型</b>一体机解决<b class='flag-5'>方案</b>:<b class='flag-5'>低成本</b>私有化落地,重塑行业智能应用新格局

    FA模型的ServiceAbility的切换介绍

    的ServiceExtensionAbility为系统API,只有系统应用才可以创建。因此,FA模型的ServiceAbility的切换,对于系统应用和三方应用策略有所不同。下面分别介绍这两种场景。 系统
    发表于 06-05 07:24

    突发!全球三大家EDA大陆,国产EDA崛起?

    这两天EDA的事传的沸沸扬扬,金融时报和路透社都报道了这件事。截止到目前,最新的消息还是这两个报告中的内容,但还不知道具体的细节。笔者认为全面即一刀切的可能性并不是很大,这样就
    的头像 发表于 05-30 09:16 2371次阅读
    突发!全球三大家EDA<b class='flag-5'>断</b><b class='flag-5'>供</b>大陆,<b class='flag-5'>国产</b>EDA崛起?