0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

探秘浪潮智能化存储管理平台InView的极致管理能力

lhl545545 来源:浪潮存储 作者:浪潮存储 2020-06-10 10:13 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

“新基建”正在成为业界关注的热点,5G、大数据中心人工智能、工业互联网等新型基础设施建设正在加速推进。“新基建”主要包含 5G 基建、特高压、城际高速铁路和城际轨道交通、新能源汽车充电桩、大数据中心、人工智能、工业互联网等七大领域的建设,涉及到通信、电力、交通、数字等多个社会民生重点行业。

在新基建中,尤其引人注目的是大数据中心。IT从业者都知道,大数据中心是承载海量数据的平台,新兴产业的未来发展将大量依赖于数字世界,从国家治理、政务服务到各个产业 ,建好数据中心将有助于促进行业转型和发展数字经济。

大数据中心的最重要的特征是数据量和规模的高速增长:到2025年全球新创建的数据将达到175ZB;企业对实时数据需求增加,到2023年实时数据占全球数据圈24.5%的份额;核心数据中心的数据存储容量占比将超过50%。

随着数据量和数据中心规模的扩大,以及各种新存储介质和技术的应用,存储系统变得越来越复杂。用户需要的存储专业知识越来越多,而用好存储对用户来说越来越难。

AI智能化技术可以解决存储系统使用的复杂性问题。AI系统会不断地从存储及其运行环境中采集存储的各种状态信息和性能数据,用机器学习算法分析,学习用户的存储使用情况,进而自动化的调整并优化存储系统,使存储服务能更好地适应用户的需求。

比如:智能化的把数据保存在合适的区域;自动的完成数据均衡;预测未来的需求;预防潜在的问题;智能调优等。有AI加持的智能化存储可以增强系统的可靠性,降低存储的复杂性和维护成本。因此,“新基建”需要智能化的“新存储”。

1

客户的未来,从智能化新存储开始

IDC在2018年6月完成了一项全球存储客户的智能化特性调查,客户对使用AI / ML算法推动存储系统的改进抱以积极的态度,如下图,

IDC调研:客户对AI智能化存储的需求同时,IDC还调研了已经使用了智能化存储的客户,询问他们从中得到了哪些好处。下图展示了客户目前最关心的五项智能服务。其中,排名第一的是改善系统的整体可用性;其次是加快问题解决速度及提高性能容量规划,预测性地识别任何即将发生的故障,监视与存储相关的其他IT基础架构也被客户重点关注。

IDC调研:用户最希望使用的智能化存储特性

2

智能化存储的关键技术

一个完整的智能化存储框架包括下图所示的5个过程:

存储的AIOps框架

1) 监控:系统首先通过日志、SNMP、RestAPI等技术手段抓取并保存存储系统中的运行状态、性能和故障报错数据,这为AI自优化系统创造了数据基础。

2) 学习:在长时间、海量的监控数据基础上,AI会不断分析用户的IO模型和系统状态信息,学习最佳的应用实践,并自动分析问题根因和发现异常行为。

3) 预测:对于新发现的问题,AI算法都可以自动学习并提取可重复的模式,并将新的算法模型应用到其他尚未发现该问题的设备上,从而准确预测风险和故障。

4) 推荐:除了智能化预测新问题外,AI还会学习出解决和优化问题的具体建议。如修改内外部配置参数、更换部件、系统软件升级等。

5) 实施:AI系统可以自动运行优化措施并解决问题。如果处于安全考虑,也可以停止自动优化系统,人工操作来解决现场问题。

学术界也非常关注智能化存储技术。国外的存储和系统领域的顶级会议FAST、ATC、SRE、KDD有很多相关文章,清华大学、中科院、华中科技大学等国内科研机构也在故障预测、根因分析、异常检测、自动调优等方面有优秀的科研成果。

清华大学在《计算机学会通讯》上系统地阐述了智能化存储的关键技术。文中把存储的智能化归纳为历史事件、当前事件、未来事件三类应用场景。

历史事件场景中瓶颈分析指的是制约存储或系统服务的硬件或软件瓶颈;热点分析指的是自动挖掘出大于正常阈值性能指标;KPI聚类是对类似的指标曲线进行聚类;KPI曲线关联挖掘是针对两条曲线的关联关系进行挖掘;全链路模块调用分析能分析出模块间的调用关系;异常事件关联挖掘是指对异常事件之间的关系进行关联分析;故障传播关系图融合了以上四种技术,推断出异常事件之间的故障传播关系。

当前事件场景主要是根据当前的日志和告警、快速检测和定位异常,并完成故障的根因分析,最终实现快速止损,控制故障的影响范围。

未来事件场景的技术原理都是通过AI技术自动挖掘故障发生前的日志、性能参数指标,找到故障前可重复的模式,从而在今后出现类似的日志模式时,提前预测故障、性能容量变化趋势以及系统可能的热点瓶颈。根据IDC的客户调查来看,针对未来事件的预测场景是存储用户关注的重点。

存储智能化的关键场景和技术

3

智能化存储的实践应用

在存储产业界中,Nimble Storage在2010年推出了智能化的存储软件Infosight,提供了预测性分析、端到端的故障定位、性能洞察等一系列的智能化功能。帮助用户分析复杂应用环境下从虚拟机到后端存储端到端的性能瓶颈,确定影响性能瓶颈的主要因素,并最终给出可行的优化或解决问题的建议。

全球存储厂商Netapp、IBM、DELL EMC也在2017年以后推出了自己的智能化产品ActiveIQ、StorageInsights和CloudIQ。

作为新数据时代下“新存储”的引领者,浪潮存储也推出了领先且独具特色的智能化存储管理平台InView,实现了磁盘故障预测、性能容量预测的智能化功能,帮助客户预判硬件故障,规避硬件故障带来的风险和损失,并给出具体的扩容建议,为客户提供更好的存储服务。
责任编辑:pj

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 人工智能
    +关注

    关注

    1821

    文章

    50547

    浏览量

    267920
  • 大数据
    +关注

    关注

    64

    文章

    9116

    浏览量

    144196
  • 工业互联网
    +关注

    关注

    28

    文章

    4397

    浏览量

    96460
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    零碳园区的智能化管理平台的应用层具体有哪些功能?

    零碳园区智能化管理平台应用层的核心定位,是“场景、实操、协同化”——以零碳目标为导向,贴合园区不同场景(工业生产、商业办公、住宅生活)的
    的头像 发表于 05-07 11:29 118次阅读
    零碳园区的<b class='flag-5'>智能化</b><b class='flag-5'>管理</b><b class='flag-5'>平台</b>的应用层具体有哪些功能?

    物料仓库的智能化管理RFID方案:驱动智慧仓库新变革

    智能化,已成为众多企业提升效率、降本增效的关键切入点。‌RFID智能化仓库管理‌恰恰以射频识别技术为核心,为这些问题提供了一个数据驱动的系统性解决方案。▣RFID
    的头像 发表于 04-13 14:10 385次阅读
    物料仓库的<b class='flag-5'>智能化</b><b class='flag-5'>管理</b>RFID方案:驱动智慧仓库新变革

    德赛电池入选工信部第二批制造业质量管理能力高等级企业名单

    近日,工业和信息部正式公布第二批制造业质量管理能力高等级企业评选结果。惠州市德赛电池有限公司凭借完善的质量管理体系、领先的数字治理能力
    的头像 发表于 04-08 17:47 1305次阅读

    中国重汽获得国家数据管理能力成熟度四级认证

    近日,由国家工业和信息部指导,中国电子信息行业联合会发布了《关于公布获得数据管理能力成熟度等级证书单位的通知》,中国重汽获得国家数据管理能力成熟度“量化管理级”(4级)认证,标志着中
    的头像 发表于 01-13 16:30 1020次阅读

    AI HOME智能体:当存储遇上智能体,开启数据管理新纪元​

    AI HOME智能体的出现,标志着数据管理进入智能化时代。它将NAS的存储能力与AI的智能分析
    的头像 发表于 12-17 17:02 1488次阅读
    AI HOME<b class='flag-5'>智能</b>体:当<b class='flag-5'>存储</b>遇上<b class='flag-5'>智能</b>体,开启数据<b class='flag-5'>管理</b>新纪元​

    中车长客通过国家数据管理能力成熟度最高等级认证

    近日,中国中车集团旗下中车长客股份公司正式通过国家《数据管理能力成熟度评估模型》(DCMM)最高等级——优化级(五级)认证,成为轨道交通行业首家获此殊荣的企业,标志着中车在数据管理能力上达到国内先进水平。
    的头像 发表于 11-24 16:22 794次阅读

    基于 HT 技术的园区元宇宙可视管理平台

    在数字转型浪潮下,园区管理智能化、可视的需求日益迫切。本文基于 HT(Hightopo)技术栈,不依赖任何第三方插件,从技术开发视角,
    的头像 发表于 11-07 14:54 698次阅读
    基于 HT 技术的园区元宇宙可视<b class='flag-5'>化</b><b class='flag-5'>管理</b><b class='flag-5'>平台</b>

    2KVA UPS的智能化转型:从备用电源到能源管理中枢

    数字浪潮下,2KVAUPS正在经历从单纯的电力保护设备向智能化能源管理平台的深刻变革。这种转变不仅提升了设备本身的效能,更重新定义了企业在
    的头像 发表于 10-11 09:57 585次阅读
    2KVA UPS的<b class='flag-5'>智能化</b>转型:从备用电源到能源<b class='flag-5'>管理</b>中枢

    海信质量管理能力再获国家级认可

    近日,工信部首批质量管理能力高等级企业名单正式出炉。海信集团旗下海信视像科技与海信日立两家公司凭借卓越的质量管理能力成功入选,入选数量行业第一。这不仅是对海信质量管理能力的国家级认可,更将通过标杆示范效应,有力推动中国制造业加速
    的头像 发表于 08-20 17:16 1319次阅读

    厂区能源管理智能化改造物联网解决方案

    御控基于工业物联网技术,构建覆盖“数据采集-传输-分析-决策-执行”全链条的智慧能源管理体系,通过硬件设备与软件平台的深度协同,实现能源管理的可视、可控
    的头像 发表于 08-19 16:46 826次阅读

    农村供水智慧管理平台怎么建设?

    。 结合农村供水点多、面广、基础设施相对薄弱、运维资源有限等特点,数之能提供基于智慧供水管理平台的物联网解决方案,通过集成水质监测、设备监控、运维管理、视频监控等模块,实现农村供水的全流程智能
    的头像 发表于 08-14 15:35 665次阅读
    农村供水智慧<b class='flag-5'>化</b><b class='flag-5'>管理</b><b class='flag-5'>平台</b>怎么建设?

    鲲云科技助力油田行业智能化安全管理

    随着国家对安全生产要求的不断加强,油田行业的安全管理亟待实现智能化和高效。在油田智能化升级的浪潮中,众多 AI 转型方案涌现,鲲云以“算力
    的头像 发表于 07-25 15:04 1251次阅读

    AI集成运维管理平台的架构与核心构成解析

    (Artificial Intelligence for IT Operations)概念,指出通过整合大数据和机器学习能力,可以实现IT运维管理智能化升级。 AI集成运维管理
    的头像 发表于 06-12 17:04 912次阅读

    酒店智能化都用到哪些芯片之高速互联型MCU CH32V317

    MCU CH32V317芯,凭借卓越的计算能力、丰富的通信接口和高集成度设计,在酒店智能化、安防监控、工业自动等领域展现出显著优势。本文将以酒店场景为切入点,深入解析CH32V317的技术特性与应用价值
    发表于 05-30 17:02

    英泰斯特通过数据管理能力成熟度三级认证

    近日,中国电子信息行业联合会公布评估结果,英泰斯特成功通过数据管理能力成熟度(DCMM三级)等级认证。标志着英泰斯特的数据管理能力得到权威认可,数据成熟度达到了行业先进水平。
    的头像 发表于 05-29 18:06 1345次阅读