0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

文心一言即将问世,或将比ChatGPT更强!

人工智能与大数据技术 来源:51CTO技术栈 2023-02-23 10:39 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

2月7日,百度官方公众号发布了一条极为简短的通告——《官宣:文心一言》。据了解,文心一言正是百度内部所研发的类ChatGPT聊天机器人,其英文名称则为ERNIE Bot。

9e2aeee4-b320-11ed-bfe3-dac502259ad0.png

据百度内部人员表示:文心一言由基于百度提出的知识增强大模型(Ernie)扩展而成的一系列高级大模型构成,可以执行广泛的任务,包括语言理解、语言生成(ERNIE 3.0 Titan)以及根据文本生成图像(ERNIE-ViLG)等。与其他语言模型相比,文心一言能够将广泛的知识与海量数据相结合,从而产生非凡的理解与生成能力。公司计划在3月完成文心一言的内部测试,然后向公众正式开放使用。

虽然对于文心一言的实际表现我们暂且不得而知,但通过百度此前所发布的名为《ERNIE 3.0 Titan: Exploring Larger-scale Knowledge Enhanced Pre-training for Language Understanding and Generation》的论文,目前我们可以大致了解到一些有关其所应用的语言模型ERNIE 3.0 Titan的相关信息。

据论文显示:ERNIE 3.0 Titan是百度于PaddlePaddle平台上所训练的千亿参数模型,其中包含多达2600亿个参数(ChatGPT使用1750亿参数的GPT3.5模型)。此外,百度还设计了一个自我监督的对抗性损失和一个可控的语言建模损失,使ERNIE 3.0 Titan生成可信和可控的文本。

为了减少计算开销和碳排放,百度还为ERNIE 3.0 Titan提出了一个在线蒸馏框架,其中教师模型将同时教授学生和训练自己。ERNIE 3.0Titan是迄今为止最大的中国密集预训模型。相关实验结果表明,ERNIE 3.0 Titan在68个NLP数据集上的性能已优于现阶段最先进的语言模型,包括ChatGPT所应用的GPT3.5模型。

9e44a7c6-b320-11ed-bfe3-dac502259ad0.png

ERNIE 3.0 Titan模型架构图

据悉,目前文心一言已进入上线前的最接冲刺阶段,而相关消息的曝出,也使百度港股一度暴涨超17%,市值增长约700亿港元。据部分业内人士推测,百度文心一言项目或早在2022年9月便已启动研发,彼时百度CEO李彦宏在世界人工智能大会上就曾表示:无论在技术层面还是商业应用层面,人工智能都有了巨大的进展,有些甚至是方向性的改变。

考虑到目前由ChatGPT所带来的生成式AI的火爆,未来觊觎这一领域市场的国内企业,势必不止百度一家。就市场角度而言,目前类ChatGPT聊天机器人最明显的价值与落地场景,正是百度主营的搜索业务。如此看来,如果下一次科技革命真的爆发在该领域,那么百度无疑已拔得头筹。此外,不少业内人士认为,考虑到谷歌和微软的推进节奏,文心一言开放内测的进度还有可能继续提前。

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 聊天机器人
    +关注

    关注

    0

    文章

    348

    浏览量

    13114
  • ChatGPT
    +关注

    关注

    31

    文章

    1600

    浏览量

    10391

原文标题:百度官宣:文心一言即将问世,或将比ChatGPT更强!

文章出处:【微信号:TheBigData1024,微信公众号:人工智能与大数据技术】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    百度衍生模型PaddleOCR登顶GitHub Star OCR全球第

    3月30日,百度衍生模型PaddleOCR在GitHub上的Star数突破73.3K,超越谷歌Tesseract OCR,成为全球Star数最高的OCR项目。
    的头像 发表于 03-31 11:40 429次阅读

    百度大模型5.0正式版上线

    今天,在百度Moment大会现场,大模型5.0正式版上线。
    的头像 发表于 01-23 16:48 1470次阅读

    百度大模型5.0 Preview荣登LMArena文本榜国内第

    12月23日,LMArena大模型竞技场发布最新排名,新模型ERNIE-5.0-Preview-1203以1451分登上LMArena文本榜,排名国内第该模型在创意写作、高难度指令等方面表现突出,超过多款国内外主流模型。
    的头像 发表于 12-23 15:02 661次阅读

    百度大模型5.0-Preview文本能力国内第

    11月8日凌晨,LMArena大模型竞技场最新排名显示,全新模型ERNIE-5.0-Preview-1022登上文本排行榜全球并列第二、中国第该模型在创意写作、复杂长问题理解、指令遵循等方面表现突出,超过多款国内外主流模型
    的头像 发表于 11-11 17:15 1637次阅读

    百度大模型X1.1正式发布

    今天,在WAVE SUMMIT深度学习开发者大会2025上,大模型X1.1正式发布,在事实性、指令遵循、智能体等能力上均提升显著。
    的头像 发表于 09-10 11:08 2328次阅读

    自动驾驶中Transformer大模型会取代深度学习吗?

    [首发于智驾最前沿微信公众号]近年来,随着ChatGPT、Claude、一言等大语言模型在生成文本、对话交互等领域的惊艳表现,“Transformer架构是否正在取代传统深度学习”
    的头像 发表于 08-13 09:15 4363次阅读
    自动驾驶中Transformer大模型会取代深度学习吗?

    AI生成的测试用例真的靠谱吗?

    软件测试正经历场深刻的技术革命。AI,尤其是以GPT、通义千问、一言、Claude等为代表的大语言模型(LLM),开始广泛介入测试流程:从需求分析、测试用例设计,到脚本生成与测试
    的头像 发表于 08-01 10:02 1897次阅读
    AI生成的测试用例真的靠谱吗?

    中兴努比亚启动接入百度4.5系列开源大模型

    近日,中兴努比亚启动接入4.5系列开源大模型,为星云智能提供新引擎,共同推动人工智能在AI手机的创新应用,加速AI技术落地,进步提升用户AI体验。
    的头像 发表于 07-15 09:35 1170次阅读

    宁畅与与百度大模型展开深度技术合作

    与部署。 凭借覆盖训练、推理、微调全流程的AI 服务器产品矩阵,宁畅帮助企业在大模型时代键打通算力与应用“任督二脉”,显著缩短模型落地周期。 在已启动的深度技术合作中,双方将基于大模型共同推出面向企业的
    的头像 发表于 07-07 16:26 1005次阅读

    波特率和比特率有何不同?仪器测试带宽如何选择?

    无论是否开源,像ChatGPT一言、作业辅导等各类AI工具,其背后都离不开大规模AI模型的训练,而这过程对算力的需求极为庞大。因此,
    的头像 发表于 07-07 09:59 2036次阅读
    波特率和比特率有何不同?仪器测试带宽如何选择?

    黑芝麻智能与大模型技术合作升级

    近日,大模型正式开源,黑芝麻智能即日起快速启动与大模型技术合作。
    的头像 发表于 07-04 17:24 1524次阅读
    黑芝麻智能与<b class='flag-5'>文</b><b class='flag-5'>心</b>大模型技术合作升级

    百度大模型X1 Turbo获得信通院当前大模型最高评级证书

    百度在520居然还领了个证?是它, 信通院当前大模型最高评级证书 ! 在5月20日的百度AI Day 上,中国信通院公布了大模型推理能力评估结果—— 百度大模型X1 Turbo在24项能力评估中
    的头像 发表于 05-21 18:19 1391次阅读
    百度<b class='flag-5'>文</b><b class='flag-5'>心</b>大模型X1 Turbo获得信通院当前大模型最高评级证书

    如何赋能医疗AI大模型应用?

    引言自ChatGPT掀起热潮以来,众多AI大模型如雨后春笋般涌现,其中包括百度科技的一言、科大讯飞的讯飞星火、华为的盘古AI大模型、腾讯的混元AI大模型以及阿里哪吒大模型等。业界戏
    的头像 发表于 05-07 09:36 795次阅读
    如何赋能医疗AI大模型应用?

    第三届百度杯创业大赛启动

    近日,第三届“杯”创业大赛面向全球正式启动报名。
    的头像 发表于 04-30 10:24 1039次阅读

    百度发布4.5 Turbo、X1 Turbo和多款AI应用

    近日,Create2025百度AI开发者大会在武汉举办。百度创始人李彦宏发布了大模型4.5 Turbo及深度思考模型X1 Turbo两大模型,以及多款AI应用。王海峰现场详细解读了背后的技术。
    的头像 发表于 04-30 10:16 1310次阅读