0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

浪潮信息发布大模型智算软件栈OGAI,为大模型创新打造高效生产力

全球TMT 来源:全球TMT 作者:全球TMT 2023-08-28 08:08 次阅读

浪潮信息正式发布大模型智算软件栈 OGAI。OGAI (Open GenAI Infra)"元脑生智",是为大模型业务提供AI算力系统环境部署、算力调度保障及模型开发管理能力的全栈全流程的智算软件栈。OGAI由浪潮信息基于大模型自身实践与服务客户的专业经验而开发,旨在为大模型研发与应用创新全力打造高效生产力,加速生成式AI产业创新步伐。

大模型是当前通用人工智能产业发展创新的核心技术。目前国内已发布的生成式AI模型超过了100个,"百模争秀"的格局初现。但大模型从研发到应用的各环节中,依然面临诸多挑战,如大模型算力的系统全栈问题、兼容适配问题、性能优化问题等。

OGAI是浪潮信息从当前大模型算力建设、模型开发和应用落地的实际需求出发,秉承全栈全流程、算力充分释放、实战验证提炼的设计原则打造而成。OGAI由5层架构组成,从L0到L4分别对应基础设施层的智算中心OS、系统环境层的PODsys、调度平台层的AIStation、模型工具层的YLink和多模纳管层的MModel。

L0层智算中心OS:面向大模型算力服务的智能算力运管平台,满足多租户以裸金属为主的弹性AI算力运管需求。其中,高效的裸金属服务支持分钟级部署上千规模裸金属节点并按需进行弹性扩展,实现异构计算芯片、IB、RoCE高速网络、高性能存储等环境一键获取,并实现计算、网络、数据隔离以保障业务安全。

L1层PODsys:开源、高效、兼容、易用的智算集群系统环境部署方案。聚焦智算集群部署场景,从OS、驱动到系统监控可视化、资源调度等集群系统环境要素全面覆盖,选用最稳定和广泛兼容的软件版本,通过一系列脚本工具简化部署过程,缩短算力上线周期,并可向企业用户提供实施安装服务和集群性能校准的专家服务。

L2层AIStation:面向大模型开发的商业化人工智能算力调度平台。针对大模型训练中常见的训练中断难题,可实现训练异常快速定位,断点自动续训:通过快速定位芯片、网卡、通讯设备异常或故障,实现全局训练暂停保持,热备算力自动弹性替换,健康节点快速CheckPoint读取,实现断点自动续训。

L3层YLink:面向大模型数据治理、预训练、微调的高效工具链。聚焦于大模型的数据治理、预训练、微调等开发过程,集成了浪潮信息在大模型研发中的自研工具和开源工具,如数据处理工具包(Y-DataKit)、大模型训练工具包(Y-TrainKit)和大模型微调工具包(Y-FTKit)等等,通过这些多样且完善的工程化、自动化工具,加速大模型的训练和开发效率。

L4层MModel:提供多模型接入、服务、评测等功能的纳管平台。核心组件包括数据集管理、模型纳管和评测,可以方便开发者和研究人员更好地管理多版本、多类型的基础大模型与任务模型,并通过多样化的评测数据集与评测任务,对多个模型进行生成准确率、推理延迟、推理稳定性等指标进行全面评估。

浪潮信息高级副总裁、AI&HPC总经理刘军表示:"OGAI提供完善的工程化、自动化工具软件堆栈,将帮助更多企业顺利跨越大模型研发应用门槛,充分释放大模型创新生产力。浪潮信息将通过智算系统软硬件高度协同进行持续创新,持续培育繁荣元脑生态,推动实现‘助百模,智千行',加速生成式AI产业创新。"

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 浪潮
    +关注

    关注

    1

    文章

    404

    浏览量

    23576
  • AI
    AI
    +关注

    关注

    87

    文章

    26468

    浏览量

    264097
  • 大模型
    +关注

    关注

    2

    文章

    1542

    浏览量

    1137
收藏 人收藏

    评论

    相关推荐

    浪潮信息发布企业大模型开发平台"元脑企智"EPAI,加速AI创新落地

    北京2024年4月18日 /美通社/ -- 4月17日,在2024浪潮信息生态伙伴大会(IPF2024)上,浪潮信息发布企业大模型开发平台"元脑企智"EPAI(Enterprise P
    的头像 发表于 04-18 21:21 147次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>发布</b>企业大<b class='flag-5'>模型</b>开发平台&quot;元脑企智&quot;EPAI,加速AI<b class='flag-5'>创新</b>落地

    浪潮信息发布企业大模型开发平台“元脑企智”EPAI

    4月17日,在2024浪潮信息生态伙伴大会(IPF2024)上,浪潮信息重磅发布企业大模型开发平台“元脑企智”EPAI(Enterprise Platform of AI),为企业AI
    的头像 发表于 04-18 10:12 115次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>发布</b>企业大<b class='flag-5'>模型</b>开发平台“元脑企智”EPAI

    浪潮信息生态伙伴大会IPF2024:发展人工智能+,加速创新落地

    4月17日,浪潮信息在北京举办的生态伙伴大会IPF2024上提出,发展人工智能+,要坚持“以应用为导向,以系统为核心”,着重激发创新活力、拓展创新路径、加速创新落地,推动人工智能成为百
    的头像 发表于 04-18 09:12 256次阅读

    模型时代,嫘祖也掌握了「新质生产力」!

    当嫘祖也开始用大模型掌握新质生产力……
    的头像 发表于 04-16 17:52 223次阅读
    大<b class='flag-5'>模型</b>时代,嫘祖也掌握了「新质<b class='flag-5'>生产力</b>」!

    浪潮信息与英特尔合作推出一种大模型效率工具“YuanChat”

    3月26日,浪潮信息与英特尔正式宣布,浪潮信息“源2.0系列基础大模型”已和最新的英特尔® 酷睿™ Ultra处理器平台完成适配,本地推理速度提升100%。
    的头像 发表于 03-27 13:50 206次阅读
    <b class='flag-5'>浪潮信息</b>与英特尔合作推出一种大<b class='flag-5'>模型</b>效率工具“YuanChat”

    潞晨科技Colossal-AI与浪潮信息AIStation完成兼容性互认证

    近日,潞晨科技的Colossal-AI大模型开发工具和浪潮信息的AIStation智能业务创新生产平台成功完成了兼容性互认证。这一合作意味着用户可以在AIStation平台上便捷地部署与调度Colossal-AI系统,从而极大提
    的头像 发表于 03-06 10:18 267次阅读

    潞晨科技Colossal-AI + 浪潮信息AIStation,大模型开发效率提升10倍

    北京2024年2月29日 /美通社/ -- 近日,潞晨科技Colossal-AI大模型开发工具与浪潮信息AIStation智能业务创新生产平台完成兼容性互认证。基于AIStation平台部署与调度
    的头像 发表于 03-01 09:43 239次阅读
    潞晨科技Colossal-AI + <b class='flag-5'>浪潮信息</b>AIStation,大<b class='flag-5'>模型</b>开发效率提升10倍

    浪潮信息澎湃认证:浪潮信息集中式存储携手仪电云i-stack云操作系统软件完成兼容性认证

    AS/HF系列产品完全兼容,满足功能需求,系统运行可靠稳定,性能表现优异。 浪潮信息澎湃技术认证 是浪潮信息基于自身多元、创新的通用计算平台,与供应链及软件服务等生态合作伙伴共同构建的
    的头像 发表于 12-08 16:40 336次阅读
    <b class='flag-5'>浪潮信息</b>澎湃认证:<b class='flag-5'>浪潮信息</b>集中式存储携手仪电云i-stack云操作系统<b class='flag-5'>软件</b>完成兼容性认证

    浪潮信息刘军:智算力系统创新 加速生成式AI产业发展

    北京2023年12月6日 /美通社/ -- 11月29日,在北京举行的2023人工智能计算大会(AICC)上,浪潮信息高级副总裁刘军在主题演讲《智算力系统创新 加速生成式AI产业发展》中分享了浪潮信息
    的头像 发表于 12-06 14:08 545次阅读
    <b class='flag-5'>浪潮信息</b>刘军:智算力系统<b class='flag-5'>创新</b> 加速生成式AI产业发展

    数聚AI ∙ 智慧未来 | 浪潮信息存储助力企业基于大模型实现数字化创新

    ,更好地帮助企业实现数字化创新? 11月29日,由DOIT传媒举办的“数智创新 · AI未来”—2023中国数据与存储峰会在北京成功举办,浪潮信息存储产品线副总经理刘希猛和分布式存储总经理姜乐果受邀参会,分享了存储在生成式AI和
    的头像 发表于 11-30 16:25 221次阅读
    数聚AI ∙ 智慧未来 | <b class='flag-5'>浪潮信息</b>存储助力企业基于大<b class='flag-5'>模型</b>实现数字化<b class='flag-5'>创新</b>

    浪潮信息发布源2.0基础大模型,千亿参数全面开源

    11月27日,浪潮信息发布"源2.0"基础大模型,并宣布全面开源。源2.0基础大模型包括1026亿、518亿、21亿等三种参数规模的模型,在
    的头像 发表于 11-28 09:10 466次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>发布</b>源2.0基础大<b class='flag-5'>模型</b>,千亿参数全面开源

    景行锐创与KeyarchOS完成浪潮信息澎湃技术认证

    、景行应用门户软件V6、景行资源分析软件V6、景行资源管理与调度软件V6在KeyarchOS V5平台上运行稳定高效,整体表现良好,满足用户需求。      
    的头像 发表于 11-23 06:18 517次阅读
    景行锐创与KeyarchOS完成<b class='flag-5'>浪潮信息</b>澎湃技术认证

    百度世界2023看点 文心大模型4.0正式发布 百度文库变身生产力工具

    百度世界2023看点 文心大模型4.0正式发布 百度文库变身生产力工具 百度世界大会2023于10月17日,以“生成未来(PROMPT THE WORLD)”为主题在北京首钢园举办。在在百度世界大会
    的头像 发表于 10-17 18:49 845次阅读
    百度世界2023看点 文心大<b class='flag-5'>模型</b>4.0正式<b class='flag-5'>发布</b> 百度文库变身<b class='flag-5'>生产力</b>工具

    浪潮信息澎湃认证:浪潮信息集中式存储携手达梦数据库管理系统V8完成兼容性认证

    ,满足功能需求,系统运行可靠稳定,性能表现优异。 浪潮信息澎湃技术认证 是浪潮信息基于自身多元、创新的通用计算平台,与供应链及软件服务等生态合作伙伴共同构建的产品兼容性认证体系,包含“
    的头像 发表于 09-27 17:10 378次阅读
    <b class='flag-5'>浪潮信息</b>澎湃认证:<b class='flag-5'>浪潮信息</b>集中式存储携手达梦数据库管理系统V8完成兼容性认证

    浪潮信息智能业务生产创新平台提升大模型算力平台使用效率

    日前,2023全球人工智能产品应用博览会在苏州开幕。浪潮信息智能业务生产创新平台AIStation凭借领先的资源调度与平台管理能力,有效提升大模型算力平台使用效率,荣获智博会核心奖项“
    的头像 发表于 07-03 11:15 647次阅读