0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

星环科技推企业级AI能力运营平台Sophon MLOps 助推AI模型落地

科技绿洲 来源:星环科技 作者:星环科技 2022-05-12 17:17 次阅读

在国内政策引导、企业产业智能升级的原生需求和疫情等多重因素作用下,中国的人工智能产业化应用在过去的5年间呈现出无可比拟的增长速度。然而随着人工智能和机器学习在企业各个业务层面的应用日渐深化,模型类型和数量也都呈快速增长态势。由于不同模型之间的训练框架、部署模式、输入输出都不相同,导致异构模型难以被统一管理。同时,各部门间缺少统一的模型从开发到上线的标准化流程规范,导致模型资产散落在各个业务部门,难以被统一纳管为企业数据资产。不断增加的模型管理成本和运维复杂度,以及生产环境的不可控风险,给企业模型管理带来了一系列挑战。

为解决AI落地难的问题,星环科技的AI团队从用户需求端出发,倾力研发了一款基于云原生架构的企业级AI能力运营平台Sophon MLOps,助推AI模型落地。Sophon MLOps 是基于云原生架构构建的企业级AI能力运营平台,聚焦于机器学习模型全生命周期中的模型管理、模型部署、模型监控预警、模型评估和模型迭代等关键环节。通过统一纳管、统一运维、统一应用、统一监控、统一评估、统一解释,赋予企业客户易用、高效且安全可靠的AI能力运营服务,协助客户规模化管理日益增长的机器学习模型,提升模型使用效率,降低模型集成管理成本,控制模型生产环境风险。

Sophon MLOps针对企业AI运营的痛点,围绕企业AI模型接入、运营管理、持续训练的全生命周期,分别提供规模化集成管理、高效模型推理、模型监控预警、模型性能评估、隐私安全保障等功能,为企业的AI日常运营插上翅膀。

星环科技9

此次更新,MLOps升级至v1.1版本,在已有功能上新增功能如下:

新增模型服务批量预测功能:完善了应用场景,功能覆盖范围从原有的仅支持在线实时预测,升级为同时支持在线与离线两种模式。离线批量预测功能支持通过直接连接数据库,获取批量数据进行模型预测,并将结果写回相应库表内,实现闭环;

新增模型服务数据偏移指标监控功能:强化了模型服务在监控预警方面的能力,致力于帮助用户更全面掌握机器学习模型服务的运行状态,并通过自定义监控指标及时发现处理异常情况,规避因数据偏移等原因引起的风险;

新增模型服务监控指标配置及告警功能;

新增服务发布审批流程管理;

新增可解释机器学习XAI模块(MVP版):可处理数据分析过程中的相关性解释、过程性解释、推理性解释和因果性解释问题。用户可以精细地分析特征与结果之间的影响关系,帮助用户精准地提升DataCentric-AI数据治理能力,针对性优化模型精度,帮助用户快速定位、优化影响业务结果的重要因子,从而促使业务成功。

在金融科技行业,随着监管政策的不断收紧,银保监会于2020年7月正式出台了《商业银行互联网贷款管理行办法》,要求商业银行落实模型从开发测试、评审、监测到退出的全生命周期的风险管理。一方面为满足监管合规要求,另一方面提升行内风险模型的管理效率,银行要求对模型全生命周期进行统一管理。此外,随着行内业务的持续发展,大量异构AI模型资产散落在各部门,一旦需要使用,调参和部门间协调均使得模型部署周期拉长。

Sophon Base 3.1使用MLOps搭建了全行统一的AI模型管理平台,快速接入行内积累的不同框架或平台训练生成的大量模型文件,按版本集成管理模型资产;并建立标准化流程,统一构建模型推理逻辑的方式,支持零代码一键部署模型应用。基于云原生基础架构,打通模型全生命周期流程,实现了银行对模型应用的统一运维和监控。

平台上线后,Sophon Base集成了全行多种算法框架生成的数百个机器学习模型。部署模型应用的平均时间由1.5天降至0.5小时,配置成本降低近80%,使模型的平均迭代周期由1月降至1周。模型效率方面,支持上百个模型预测服务同时在线,单条数据实现毫秒级响应。

Sophon MLOps打通了AI的全生命周期,为企业的各类用户角色搭建了统一的AI协作平台。对于企业而言,MLOps规模化集成管理了多源异构的机器学习模型,并提供高效且保障隐私安全的模型推理、监控预警及性能评估服务;对用户而言,能感受到操作上的快捷,AI应用与部署更是如虎添翼。未来,MLOps将继续迭代更加丰富的功能,赋能企业AI更快、更好地落地。

审核编辑:彭静
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据
    +关注

    关注

    8

    文章

    6508

    浏览量

    87552
  • AI
    AI
    +关注

    关注

    87

    文章

    26338

    浏览量

    263943
  • 机器学习
    +关注

    关注

    66

    文章

    8094

    浏览量

    130513
  • 星环科技
    +关注

    关注

    0

    文章

    35

    浏览量

    2564
收藏 人收藏

    评论

    相关推荐

    使用cube-AI分析模型时报错的原因有哪些?

    使用cube-AI分析模型时报错,该模型是pytorch的cnn转化成onnx ``` Neural Network Tools for STM32AI v1.7.0 (STM.
    发表于 03-14 07:09

    AI模型怎么解决芯片过剩?

    AI模型
    电子发烧友网官方
    发布于 :2024年01月02日 15:42:05

    AI模型可以设计电路吗?

    AI模型
    电子发烧友网官方
    发布于 :2024年01月02日 15:09:29

    驾驭创造的力量: 生成式 AI 时代的 MLOps 演进

    以下文章来源于谷歌云服务,作者 Google Cloud 驾驭创造的力量: 生成式 AI 时代的 MLOps 演进  MLOps 是一种将机器学习模型从实验室推向生产的系统方法,它能够
    的头像 发表于 12-21 18:05 161次阅读

    利用 NVIDIA AI Foundation Models 构建自定义企业级生成式 AI

    在生成式 AI 领域,构建企业级大语言模型(LLM)需要具备采集高质量数据、设置加速基础设施和优化模型方面的专业知识。 开发者可以从预训练模型
    的头像 发表于 11-17 21:30 417次阅读
    利用 NVIDIA <b class='flag-5'>AI</b> Foundation Models 构建自定义<b class='flag-5'>企业级</b>生成式 <b class='flag-5'>AI</b>

    【KV260视觉入门套件试用体验】Vitis AI 构建开发环境,并使用inspector检查模型

    、低成本的 AI 解决方案。 Vitis AI 可以做什么? Vitis AI 可以做很多事情,例如: 优化和编译深度学习模型,使其适应赛灵思硬件
    发表于 10-14 15:34

    IBM Z 推出企业级 AI能力,持续助力主机客户 AI 之旅

    兴地宣布 IBM Z 大型主机推出新的 AI 产品套件,它旨在帮助客户加速在广泛的用例和行业中,借助 IBM Z 落地企业级 AI,进而改善业务成果。我们正在将
    的头像 发表于 09-27 18:15 284次阅读
    IBM Z 推出<b class='flag-5'>企业级</b> <b class='flag-5'>AI</b> 新<b class='flag-5'>能力</b>,持续助力主机客户 <b class='flag-5'>AI</b> 之旅

    企业级生成式AI应用,如何克服“幻觉”问题

    然而,企业级 AI 应用与个人 AI 应用需求之间存在巨大差异,对技术本身的要求也不在一个量级。仅拿当下生成式 AI 应用最让人诟病的“AI
    的头像 发表于 09-21 16:00 439次阅读

    AI智能呼叫中心

    、数据驱动决策以及人力成本节约,旨在深入剖析其核心优势和对企业的重要意义。一、自动化处理AI智能呼叫中心通过引入自然语言处理(NLP)、机器学习和自动化技术,使得呼叫中心的处理过程更加高效和准确,AI
    发表于 09-20 17:53

    云知声以AI助推医疗场景智慧化升级

    近日,国内知名行企研究原创内容平台头豹发布“头豹行企指南”,一图介绍中国AI医疗助理行业明星企业。凭借其领先于业界的智慧医疗能力与突出的行业落地
    的头像 发表于 08-31 16:04 340次阅读

    IBM 陈科典:以行业和技术专长加速场景落地,助企业AI 为生产力

    8 月 22 日,IBM 在北京召开“企业级 AI 的未来——IBM watsonx 大中华区发布会”,宣布新一代 AI 与数据平台 IBM watsonx 在中国市场
    的头像 发表于 08-31 12:35 268次阅读
    IBM 陈科典:以行业和技术专长加速场景<b class='flag-5'>落地</b>,助<b class='flag-5'>企业</b>化 <b class='flag-5'>AI</b> 为生产力

    耀世星辉发布多模态模型AI创作平台悦灵犀

    多模态模型AI创作平台悦灵犀。悦灵犀是一款多模态模型的AGI创作平台,依托悦享人工智能大模型"北
    的头像 发表于 07-18 21:17 422次阅读
    耀世星辉发布多模态<b class='flag-5'>模型</b><b class='flag-5'>AI</b>创作<b class='flag-5'>平台</b>悦灵犀

    IGT Solutions推出企业级生成式人工智能平台TechBud.AI以实现卓越客户体验

    释放快速创新以推动持续且盈利性的业务成果 西雅图2023年6月23日 /美通社/ -- IGT Solutions 推出了创新、先进的企业级生成式人工智能平台TechBud.AI。通过企业级
    的头像 发表于 06-24 21:20 336次阅读

    IBM发布watsonx平台,为下一代企业级基础模型提供动力

    watsonx 是一个针对基础模型和生成式AI   的全新平台,提供一个包括AI开发平台、数据存储和AI
    的头像 发表于 05-10 21:22 396次阅读