0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

文心一言即将问世,或将比ChatGPT更强!

人工智能与大数据技术 来源:51CTO技术栈 2023-02-23 10:39 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

2月7日,百度官方公众号发布了一条极为简短的通告——《官宣:文心一言》。据了解,文心一言正是百度内部所研发的类ChatGPT聊天机器人,其英文名称则为ERNIE Bot。

9e2aeee4-b320-11ed-bfe3-dac502259ad0.png

据百度内部人员表示:文心一言由基于百度提出的知识增强大模型(Ernie)扩展而成的一系列高级大模型构成,可以执行广泛的任务,包括语言理解、语言生成(ERNIE 3.0 Titan)以及根据文本生成图像(ERNIE-ViLG)等。与其他语言模型相比,文心一言能够将广泛的知识与海量数据相结合,从而产生非凡的理解与生成能力。公司计划在3月完成文心一言的内部测试,然后向公众正式开放使用。

虽然对于文心一言的实际表现我们暂且不得而知,但通过百度此前所发布的名为《ERNIE 3.0 Titan: Exploring Larger-scale Knowledge Enhanced Pre-training for Language Understanding and Generation》的论文,目前我们可以大致了解到一些有关其所应用的语言模型ERNIE 3.0 Titan的相关信息。

据论文显示:ERNIE 3.0 Titan是百度于PaddlePaddle平台上所训练的千亿参数模型,其中包含多达2600亿个参数(ChatGPT使用1750亿参数的GPT3.5模型)。此外,百度还设计了一个自我监督的对抗性损失和一个可控的语言建模损失,使ERNIE 3.0 Titan生成可信和可控的文本。

为了减少计算开销和碳排放,百度还为ERNIE 3.0 Titan提出了一个在线蒸馏框架,其中教师模型将同时教授学生和训练自己。ERNIE 3.0Titan是迄今为止最大的中国密集预训模型。相关实验结果表明,ERNIE 3.0 Titan在68个NLP数据集上的性能已优于现阶段最先进的语言模型,包括ChatGPT所应用的GPT3.5模型。

9e44a7c6-b320-11ed-bfe3-dac502259ad0.png

ERNIE 3.0 Titan模型架构图

据悉,目前文心一言已进入上线前的最接冲刺阶段,而相关消息的曝出,也使百度港股一度暴涨超17%,市值增长约700亿港元。据部分业内人士推测,百度文心一言项目或早在2022年9月便已启动研发,彼时百度CEO李彦宏在世界人工智能大会上就曾表示:无论在技术层面还是商业应用层面,人工智能都有了巨大的进展,有些甚至是方向性的改变。

考虑到目前由ChatGPT所带来的生成式AI的火爆,未来觊觎这一领域市场的国内企业,势必不止百度一家。就市场角度而言,目前类ChatGPT聊天机器人最明显的价值与落地场景,正是百度主营的搜索业务。如此看来,如果下一次科技革命真的爆发在该领域,那么百度无疑已拔得头筹。此外,不少业内人士认为,考虑到谷歌和微软的推进节奏,文心一言开放内测的进度还有可能继续提前。

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 聊天机器人
    +关注

    关注

    0

    文章

    348

    浏览量

    13044
  • ChatGPT
    +关注

    关注

    31

    文章

    1596

    浏览量

    10095

原文标题:百度官宣:文心一言即将问世,或将比ChatGPT更强!

文章出处:【微信号:TheBigData1024,微信公众号:人工智能与大数据技术】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    自动驾驶中Transformer大模型会取代深度学习吗?

    [首发于智驾最前沿微信公众号]近年来,随着ChatGPT、Claude、一言等大语言模型在生成文本、对话交互等领域的惊艳表现,“Transformer架构是否正在取代传统深度学习”
    的头像 发表于 08-13 09:15 3950次阅读
    自动驾驶中Transformer大模型会取代深度学习吗?

    宁畅与与百度大模型展开深度技术合作

    与部署。 凭借覆盖训练、推理、微调全流程的AI 服务器产品矩阵,宁畅帮助企业在大模型时代键打通算力与应用“任督二脉”,显著缩短模型落地周期。 在已启动的深度技术合作中,双方将基于大模型共同推出面向企业的
    的头像 发表于 07-07 16:26 676次阅读

    波特率和比特率有何不同?仪器测试带宽如何选择?

    无论是否开源,像ChatGPT一言、作业辅导等各类AI工具,其背后都离不开大规模AI模型的训练,而这过程对算力的需求极为庞大。因此,
    的头像 发表于 07-07 09:59 1415次阅读
    波特率和比特率有何不同?仪器测试带宽如何选择?

    黑芝麻智能与大模型技术合作升级

    近日,大模型正式开源,黑芝麻智能即日起快速启动与大模型技术合作。
    的头像 发表于 07-04 17:24 1043次阅读
    黑芝麻智能与<b class='flag-5'>文</b><b class='flag-5'>心</b>大模型技术合作升级

    科技云报到:AI Agent打了个响指,商业齿轮加速转动

    科技云报到原创 3月16日,百度旗下文大模型4.5和文大模型X1正式发布。目前,两款模型已在一言官网上线,免费向用户开放。 同时,
    的头像 发表于 03-18 18:06 856次阅读

    deepseek和文一言两者有什么区别?哪个跟合适您使用呢?

    (DeepSeek)公司开发,该公司专注于开发低成本、高性能的AI模型,致力于通过技术创新推动人工智能技术的普惠化。DeepSeek可能基于独特的技术架构和算法,如混合专家(MoE)架构和多头潜在注意力(MLA)机制。 ◆ 一言
    的头像 发表于 02-23 09:37 3842次阅读

    百度下大模型正式开源

    随着大模型的迭代升级和成本不断下降,一言将于4月1日0时起全面免费,所有PC端和APP端用户均可体验
    的头像 发表于 02-17 13:44 822次阅读

    百度搜索与心智能体平台接入DeepSeek及大模型深度搜索

    近日,百度搜索与心智能体平台联合宣布了项重要更新:将全面接入DeepSeek及大模型最新的深度搜索功能。这更新将为用户和开发者带来
    的头像 发表于 02-17 09:14 993次阅读

    一言ChatGPT同时免费,读懂全球AI新周期

    2025全球AI迎来降本升级浪潮
    的头像 发表于 02-14 10:13 1.3w次阅读
    从<b class='flag-5'>文</b><b class='flag-5'>心</b><b class='flag-5'>一言</b>与<b class='flag-5'>ChatGPT</b>同时免费,读懂全球AI新周期

    OpenAI与百度开启大模型5.0竞赛,并宣布全面免费

    近日,百度一言在官网上宣布了项重大决策:自4月1日0时起,心系列模型将全面免费开放。这意味着,所有PC端和APP端的用户都将能够免费
    的头像 发表于 02-14 09:38 738次阅读

    百度大模型4月1日起全面免费开放

    列最新的模型功能。 百度表示,大模型的此次升级不仅带来了更加丰富的功能,还致力于提升用户体验。与此同时,百度还透露,一言将同步上线深
    的头像 发表于 02-14 09:19 698次阅读

    百度宣布一言将全面免费

    随着大模型的迭代升级和成本不断下降,一言将于4月1日零时起,全面免费,所有PC端和APP端用户均可体验
    的头像 发表于 02-13 10:46 673次阅读

    机械革命无界X系列轻薄本将预装一言

    提供了多样化的选择。机械革命将为无界X系列轻薄本预装百度一言,为用户带来更加智能、便捷的使用体验。用户可以通过语音文字与笔记本进行交互,获取所需的信息,服务增强使用体验以及推动A
    的头像 发表于 01-20 17:26 1195次阅读

    说清楚什么是AI大模型

    生成能力强,部分版本支持多模态输入(如图像理解) 一言 百度 针对中文优化,适合国内应用场景 LLa
    的头像 发表于 01-02 09:53 4028次阅读
    <b class='flag-5'>一</b><b class='flag-5'>文</b>说清楚什么是AI大模型

    模力无限,星河共创:启明云端与您共赴大模型生态大会

    在人工智能的浪潮中,我们即将迎来场科技界的盛会——大模型生态大会。这场将于12月26日在上海·张江科学会堂举行的大会,由深度学习技术及应用国家工程研究中心主办,百度飞桨及
    的头像 发表于 12-24 18:01 1543次阅读
    模力无限,星河共创:启明云端与您共赴<b class='flag-5'>文</b><b class='flag-5'>心</b>大模型生态大会