0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

借助浪潮信息元脑企智EPAI高效创建大模型RAG

浪潮AIHPC 来源:浪潮AIHPC 2024-12-19 14:32 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

面对大量不断迭代的新知识,大模型必须“终身学习”才能满足实际应用的需求。RAG(Retrieval-augmented Generation,检索增强生成)让生成式大模型能够利用外部的知识源来增强生成能力,提高生成质量和可靠性。但企业构建知识检索系统并非易事,通常面临开发门槛高、生成内容差等难题。而借助浪潮信息元脑企智EPAI企业大模型开发平台,企业仅需三步即可高效创建大模型RAG,让企业内部积累的大量数据得到有效利用,唤醒企业沉睡的知识,显著提升大模型回答的准确性。

RAG:生成式大模型落地的最佳实践方案

在AIGC大模型落地企业应用过程中,必然会碰到的一个问题是,大模型从训练到完成部署,并不意味着抵达了开发工作的“终点”。在真实场景中,每时每刻都在产生大量数据,知识会迭代得飞快,如新学说的出现、领域知识的更新、某个定义的延展、某个指标的调整等,“终身学习”不仅适用于人类本身,对AI来说同样是必须具备的能力。一旦丧失这种能力,大模型会很快表现出能力的“天花板”,包括产生幻觉、缺乏对生成文本的可解释性、专业领域知识理解差,以及对最新知识的了解有限等等。

针对这一问题,业界主要有两种解决途径:一种是微调(Fine Tune)来更新模型,另一种是让AI能够与外部世界互动,以不同的形式和方式获取知识,即大模型+RAG。

微调固然效果好,可以让模型真正的“学会”一些私域知识。但是微调也会带来几个问题:首先,由于生成模型依赖于内在知识(权重),因此模型还是无法摆脱幻觉的产生,在对理解门槛高且准确性要求严格的场景下,这是完全无法接受的。其次,模型微调并不是一个简单的工作,无论是从数据准备、算力消耗、微调效果、训练时间等各个角度来看,随时用新产生的数据来进行微调都是不现实的,且最终微调的效果也无法保证,能够做到每月更新一次都已经是很理想的状态。

相比之下,RAG让生成式大模型能够利用外部的知识源(非模型本身的知识库)来增强模型的生成能力,减少生成内容的偏差和错误,提高生成质量和可靠性,在有效缓解模型幻觉的同时,也能够“唤醒沉睡的知识”,让企业内部积累的大量数据得到有效利用。由于接入外部实时动态数据,RAG在理论上没有知识边界的限制,且无需频繁进行模型训练,故已经成为生成式大模型行业落地最佳实践方案。

RAG很好,但好的RAG不好开发

RAG虽好,但在实际开发应用的场景中,企业构建知识检索系统并非易事,通常面临较高的开发门槛和较差的生成内容等难题。

■ 技术门槛高,开发效率低

首先,即便技术人员编程能力扎实、深悟大模型架构原理,从海量开源方案里挑选出最合适的大模型+ RAG组合,也需要不断的试错,定制化开发的时间成本高昂。其次,RAG的构建包含知识文档的准备、嵌入模型(embedding model)、向量数据库、查询检索和生成回答五个基本环节,各个环节均有着极大的优化空间。如在处理企业数据时,仍需设计流程,清洗、分类、标注各类数据,保其质量达模型训练标准;检索参数配置同样如此,向量模型选取与优化若有差池,也易使模型训练失败、检索不准。而遵循效果相乘叠加的定律,90%×90%×90%×90%×90%=59%,这意味着任何一个环节优化效果不佳,将会导致最终的生成效果与最初设想相距甚远。

■ 复杂文档解析能力不足,生成效果差

企业数据文档种类繁杂,高质量的文档解析能力会极大影响最终的知识检索成效。以金融机构为例,合同、报告、Excel 财务数据表及 PPT 产品介绍等文档多格式并行,开源RAG方案对此的解析能力较差,如在合同关键条款的提取方面失准,条款解读发生偏差;进行产品比对推荐时,易导致检索参数及大模型抉择失当,推荐金融产品难以满足个性化需求,使客户对企业信任与满意度滑坡。

元脑企智EPAI:构建大模型RAG仅需三步,唤醒企业沉睡的知识

针对当前企业在构建RAG上普遍面临的难题,浪潮信息元脑企智EPAI(Enterprise Platform of AI)为企业发掘数据资产、“唤醒沉睡的知识”提供了强大的开发平台,文档解析、知识库构建、检索增强生成等特色功能,不仅极大提升了企业知识管理系统的构建效率,还显著增强了大模型回答的准确性。

■ 高效的文档解析与知识库构建

元脑企智EPAI适配PDF、TXT、DOCX等多类文档格式上传解析,可深度处理文档内容,通过强大数据清洗和灵活的知识分块,帮助企业建立高质量私域知识库,并支持复杂问题、大型数据集或跨多个文档查询。

■ 更优的检索增强生成效果

元脑企智EPAI囊括关键词检索、语义检索、混合检索等多元检索模式,精准适配各类场景检索诉求。用户可依自身特定需求,选择最合适的检索方法。借由自动化 RAG pipeline技术,能敏捷抓取最新知识融入大模型,实现检索库的定期更新,从而确保生成的文本内容基于最新的信息,提升生成内容的准确性和效率,切实满足企业多样化的使用需求。

经过浪潮信息在大模型+RAG开发上的反复实践与验证,元脑企智EPAI封装了浪潮信息深度优化的RAG环境,开发者仅需三步即可快速完成检索增强生成系统的构建。

Step1创建知识库,奠定知识基石

首先,用户需要在元脑企智EPAI上创建一个知识库并上传企业文档。元脑企智EPAI支持多种文档格式,包括PDF、TXT、DOCX等。然后选配解析参数,如编码模型、文本分块长度等。开始文档解析。文档解析是将文档的内容进行抽取并对其进行分块,元脑企智EPAI在解析中支持文档版式识别,对表格、图片的文字都能做到精准提取。

文档解析成功后,内容将被存储在知识库中,形成结构化的知识块。

Step2配置检索参数,优化检索效能

在文档解析完成后,用户需要配置大模型和检索参数,以优化检索效果。元脑企智EPAI提供了多种检索参数,包括粗排引用数量、引用数量、检索类型等。在检索策略上,支持混合检索、关键词检索、向量检索等。

配置好检索参数后,用户可以进行检索测试,以验证文档分块和检索效果。在检索测试界面,用户可以输入测试文本,查看检索结果。

Step3对话交互,实现智能应用

测试完成后,元脑企智EPAI可以将知识库发布为知识助手,并且提供在线交互和API两种使用方式。

在线交互中,用户输入问题,元脑企智EPAI将结合知识库内容,通过大模型生成准确的回答,并展示引用源。下图展示,元脑企智EPAI作为营养问答助手,通过检索增强生成,提供营养方面的回答。

如果选择用API的方式,用户可以通过元脑企智EPAI创建自定义助手,将配置好的模型和知识库保存为助手,并通过API接口调用。这一功能使得用户可以轻松地将元脑企智EPAI的RAG能力集成到现有的信息系统中,提升系统的智能化水平。

eb78afdc-bd9c-11ef-8732-92fbcf53809c.png元脑企智EPAI让某领先IT企业智能生产力激增

业界领先的某IT企业积极利用元脑企智EPAI平台推动内部的智能化转型,目前已“零代码”开发出IT售前助手“元小智”和撰稿助手“元小墨”。

在“元小智”开发过程中,该企业售前团队(非专业开发人员)利用元脑企智EPAI内置的数据处理工具,自动化解析结构及非结构化数据,从超 1500份涵盖 PDF、DOCX、DOC、XLS等多样格式的数据资源里,成功构筑8大业务线所有在售产品知识库,整个开发时间仅耗时1人1月,有力驱动知识集成与业务精进。

在“元小墨”开发过程中,该企业市场部团队(非专业开发人员)按照不同业务线、稿件类型收集了1300+篇成文稿件、背景资料、速记、白皮书,一键打包上传,不用任何代码即构建起专用知识库。同时通过自动化的RAG pipeline 技术将最新的知识融入大模型,通过选择关键词检索、语义检索、混合检索等不同的检索策略,有效提升检索生成内容的准确性。

在“元小墨”的加持下,该企业市场部团队资料搜索时间缩减80%,同时内容生成质量跃升,紧密贴合多元需求,驱动市场传播创新。如在内容策划时,关键词检索锁定产品亮点与市场趋势报告;定制文案阶段,语义检索精准捕捉品牌意图,推送契合风格文案;官微运营中,利用混合检索融合优势,从海量素材中精准定位热点关联素材助力推文。

元脑企智EPAI(Enterprise Platform of AI)是浪潮信息的大模型应用落地解决之道,能够为企业AI大模型落地应用提供高效、易用、安全的端到端开发平台,提供数据准备、模型训练、知识检索、应用框架等系列工具,支持调度多元算力和多模算法,帮助企业高效开发部署生成式AI应用、打造智能生产力。在大模型技术持续演进的进程中,元脑企智EPAI 将以持续创新,助力企业智能应用创新与效率提升。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 浪潮
    +关注

    关注

    1

    文章

    476

    浏览量

    25298
  • AI
    AI
    +关注

    关注

    89

    文章

    38085

    浏览量

    296331
  • 大模型
    +关注

    关注

    2

    文章

    3440

    浏览量

    4960

原文标题:唤醒企业沉睡的知识,元脑企智EPAI三步高效创建大模型RAG

文章出处:【微信号:浪潮AIHPC,微信公众号:浪潮AIHPC】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    浪潮信息发布"SD200"超节点,面向万亿参数大模型创新设计

    北京2025年8月8日 /美通社/ -- 8月7日,浪潮信息发布面向万亿参数大模型的超节点AI服务器"SD200"。该产品基于浪潮信息
    的头像 发表于 08-08 22:17 526次阅读
    <b class='flag-5'>浪潮信息</b>发布&quot;<b class='flag-5'>元</b><b class='flag-5'>脑</b>SD200&quot;超节点,面向万亿参数大<b class='flag-5'>模型</b>创新设计

    万亿参数!智一体机率先支持Kimi K2大模型

    北京2025年7月21日 /美通社/ -- 浪潮信息宣布智一体机已率先完成对Kimi K2 万亿参数大模型的适配支持,并实现单用户70
    的头像 发表于 07-22 09:27 401次阅读
    万亿参数!<b class='flag-5'>元</b><b class='flag-5'>脑</b><b class='flag-5'>企</b>智一体机率先支持Kimi K2大<b class='flag-5'>模型</b>

    筑基&quot;AI+人才&quot;培养,浪潮信息携手伙伴拓尔思推出智慧教育新平台

    北京2025年3月22日 /美通社/ -- 近期,生态伙伴拓尔思信息技术股份有限公司(以下简称:拓尔思)携手浪潮信息,联合为高校AI人才培养推出"AI创新培养综合服务平台",基于该
    的头像 发表于 03-27 16:56 626次阅读
    筑基&quot;AI+人才&quot;培养,<b class='flag-5'>浪潮信息</b>携手<b class='flag-5'>元</b><b class='flag-5'>脑</b>伙伴拓尔思推出智慧教育新平台

    天瞳威视与浪潮信息达成战略合作,推进高阶智驾车载计算系统创新

    北京2025年3月22日 /美通社/ -- 近日,苏州天瞳威视电子科技有限公司与浪潮信息旗下苏州智能科技有限公司达成战略合作协议。此次合作依托浪潮信息提供的车载算力平台硬件系统、底
    的头像 发表于 03-27 16:55 547次阅读
    天瞳威视与<b class='flag-5'>浪潮信息</b>达成战略合作,推进高阶智驾车载计算系统创新

    浪潮信息智DeepSeek一体机将举办生态伙伴推介体验会

     3月11日,浪潮信息将面向全国生态伙伴举办"智DeepSeek一体机生态伙伴推介体验
    的头像 发表于 03-09 14:20 480次阅读
    <b class='flag-5'>浪潮信息</b>:<b class='flag-5'>元</b><b class='flag-5'>脑</b><b class='flag-5'>企</b>智DeepSeek一体机将举办生态伙伴推介体验会

    浪潮信息EPAI已接入DeepSeek,大幅提升DeepSeek企业应用准确率

    北京2025年2月21日 /美通社/ -- 浪潮信息宣布EPAI企业大模型开发平台已全面
    的头像 发表于 02-23 07:32 881次阅读
    <b class='flag-5'>浪潮信息</b>:<b class='flag-5'>元</b><b class='flag-5'>脑</b><b class='flag-5'>EPAI</b>已接入DeepSeek,大幅提升DeepSeek企业应用准确率

    浪潮信息发布R1推理服务器

    。 DeepSeek R1 671B模型作为业界领先的深度学习模型,其部署一直面临着较高的难度和成本。而浪潮信息R1推理服务器通过一系
    的头像 发表于 02-17 10:32 1035次阅读

    天锐医健加入生态,采用EPAI打造全流程医疗大模型应用

    北京2025年2月7日 /美通社/ -- 近日,广州天锐医健信息科技有限公司(以下简称"天锐医健")与浪潮信息签署生态战略合作协议。双方针对医院提升门诊效率的现实需求,共同研发覆盖
    的头像 发表于 02-08 12:18 498次阅读

    【「基于大模型RAG应用开发与优化」阅读体验】RAG基本概念

    随着大模型在25年初的进一步发展,RAG应用已成为新的一个趋势,很荣幸有机会试读这本<基于大模型RAG应用开发与优化>,书本很厚,有500多页,诚意满满。 本书所阐述
    发表于 02-08 00:22

    【「基于大模型RAG应用开发与优化」阅读体验】+Embedding技术解读

    引入外部知识库来增强生成模型的能力。而Embedding在 Embedding模型将用户的问题和文档库中的文本转换为向量表示,这是RAG系统进行信息检索和文本生成的基础。
    发表于 01-17 19:53

    博研智通携手浪潮信息打造香港智慧交通

    近日,为了将有限的物理空间发挥到极致,香港率先在多个繁华地段的十字路口升级为智慧路口。通过浪潮信息助力博研智通打造的「云边协同的全息智慧路口整体解决方案」,实现了灯随车变、灯候人行的智能化管理,大大
    的头像 发表于 01-03 11:40 873次阅读

    浪潮信息与智源研究院携手共建大模型多元算力生态

    人工智能技术的快速发展。浪潮信息与智源研究院将充分整合各自在算力、算法和技术创新方面的优势资源,共同探索大模型多元算力的新应用和新模式。 目前,智源研究院的Triton算子库FlagGems已正式接入浪潮信息
    的头像 发表于 12-31 11:49 872次阅读

    浪潮信息与智源研究院达成战略合作协议

    正式接入浪潮信息EPAI企业大模型开发平台,助力企业实现更快速、更广泛、更
    的头像 发表于 12-26 10:25 884次阅读

    浪潮信息发布&quot;源&quot;Yuan-EB,刷新RAG检索最高成绩

    检索任务的第一名,以78.41的平均精度刷新了大模型RAG检索的最高成绩。 "源"Yuan-EB的发布,标志着浪潮信息在知识向量化技术方面取得了重要进展。该模型基于
    的头像 发表于 12-25 15:54 804次阅读

    浪潮信息与17家伙伴共签亿级分销协议

    近日,一场意义非凡的签约仪式——2025年浪潮信息亿级分销伙伴签约大会圆满落幕。在这场盛会中,浪潮信息与来自全国12个省区的17家生态伙伴共同签署了亿级分销合作协议,携手开启合作共
    的头像 发表于 12-25 15:46 1186次阅读