0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

IBM为百度智能云提供存储解决方案,助推进向降本增效的目标迈进

牵手一起梦 来源:至顶网 作者:任新勃 2020-06-03 17:26 次阅读

在数字经济时代,海量的数据成为数字经济的重要生产要素。特别是受新型冠状病毒疫情影响的2020年,线下的生产和生活迅速的转移到了线上,相应的让数据再次迎来另一波快速增长。

对于像百度智能云这样的云厂商,海量的数据既是资产也是压力,在压力方面面临着包括存储能力和算力等资源方面的挑战。

“尤其是今年一季度,百度智能云很多的云服务都是在扩容,都是在加班加点来满足客户的需求,包括娱乐类、会议类、教育类等等,这对我们的挑战也比较大。过去的过去9个月,百度智能云已经用了10万盘磁带,存储900多PB数据。”百度智能云副总经理谢广军分享到。

这些海量数据的存储对于百度智能云来讲,最大问题是如何降低高昂的存储成本。一方面互联网公司数据量越来越大,数据保存成本负担太重,需要大量扩展其搜索引擎和云存储。另一方面数据的合规保存。国家对互联网行业的管理要求越来越严格,多数数据必须有归档。同时,国家对互联网日志类数据保存时长要求超过10年。

百度智能云对于海量数据需要按照读写频率和冷热数据等特性对于存储进行不同层次的布局,“我们希望提供透明化的生命周期的管理。从产生的初期的热数据到系统感知到其访问频率降低,再到没有太多的访问,可以做到从高性能的存储平台到冷存储平台低成本存储。同时,这些数据需要调用的时候,能比较快被调用出来。” 谢广军讲到。百度智能云需要一种既能降低成本,又能在其庞大的分布式文件系统中提供透明IO的解决方案。

百度智能云一方面基于新一代存储介质打造高性价比存储产品,一方面重视软硬件结合的方案,搭建分布式存储的系统。据了解,百度把高IO的数据读取放在持久内存型的存储系统,打造基于NVMe+RDMA技术,提供单盘百万级IOPS及千MBps吞吐高性能SSD云磁盘。与此同时,百度基于IBM磁带库平台,实现EB级磁带规模应用,这也是国内第一家上线磁带归档服务的云平台。

如何管理海量的数据?

可以看到,百度智能云需要一个弹性的高性价比的存储解决方案来管理其数据存储。IBM为百度智能云提供了融合Spectrum Scale、Spectrum Archive和Tape介质的存储解决方案,通过IBM的归档存储技术,百度智能云的对象存储在产品实力上有了很大的增强。在过去的一年里,百度智能云与IBM一起攻克了许多技术的瓶颈,实现了业务永续化经营,保证数据安全,帮助百度智能云进一步朝降本增效的目标迈进。

IBM存储一直聚焦在为客户提供统一的数据管理平台。当企业面对云上、云下的不同的应用的时候,IBM存储基于统一的数据平台,来确保企业数据的安全、共享和按需供应。“无论您今天是块存储、文件、对象还是磁带,IBM存储解决方案可满足客户非常广泛的应用和使用的场景。无论您今天数据放在百度云上或者其他的公有云平台上,都可以有一个非常灵活的选择。” IBM大中华区系统部存储系统总经理吴磊。

对于百度智能云来讲,磁带近线存储资源池的建成极大地提高了IT对业务的支持力度,满足了业务对低成本、低功耗、高空间数据密度,绿色数据中心的存储需求。过去9个月,百度用了10万盘磁带,存储900多PB数据,归档存储产品相较普通存储的成本降低了85%。

IBM归档存储适用于多种业务场景。“比如在视频这个领域,大家在互联网视频里面去分发的,不管是短视频还是长视频,都是转码后的视频。不管是UGC,尤其是PGC产生的内容,很大、很高清的远视大文件,这些文件转码后不再使用了,这种场景就很适合归档存储,这也是数据资产,我们需要保存起来。” 谢广军举例说明。在IBM的帮助下,百度智能云在过去一年中积累了丰富的业务应用场景。另外还有石油勘探、医疗影像、基因测序分析和物联网相关的数据等也可以放在归档存储上。

同时,基于IBM Spectrum Scale(原GPFS)存储软件方案,IBM还在数据孤岛之间建立高效、安全、稳定的数据管道,这对业务本身的数据流通和融合提供很大的帮助。对于百度智能云来讲,统一接口屏蔽介质差异,使得百度的数据在整个生命周期中流转更顺畅,业务可以0成本获得更高性价比。

使用IBM的归档存储技术之前,百度智能云的对象存储分为高性能存储、标准存储和低频存储,这些其实是基于磁盘的。相比之下,有些客户提出需要更高的性价比、保存时间更长的存储产品与服务。此时引入IBM的技术则为百度智能云打造下一个阶梯的存储产品带来了能力补充,补齐了百度智能云存储产品矩阵的最后一块“积木”。同时IBM归档存储技术还做到了磁带作为近线存储,通过整套部署,库体满配,磁带不出库就可以对磁带数据进行不定期访问。

对于百度智能云来讲无论是支撑其内部的业务,还是外部客户的业务,需要7×24小时近线存储。IBM归档存储技术可以实现在一到两分钟之内读到几十TB的一个磁带数据,过去是很多客户不可想象的。

可以说基于IBM存储分布式系统结合百度智能云自己的分布式文件系统。就能够实现百度智能云对外服务的温、热、冷,几种不同的数据通道打通,数据根据自己的生命周期自由去流动。

责任编辑:gt

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • IBM
    IBM
    +关注

    关注

    3

    文章

    1671

    浏览量

    74272
  • 数据
    +关注

    关注

    8

    文章

    6511

    浏览量

    87595
  • 存储
    +关注

    关注

    12

    文章

    3856

    浏览量

    84660
收藏 人收藏

    评论

    相关推荐

    智能电表使用国产SF25C20晶圆合封MCU助力企业降本增效

    智能电表使用国产SF25C20晶圆合封MCU助力企业降本增效
    的头像 发表于 04-15 09:24 89次阅读
    <b class='flag-5'>智能</b>电表使用国产SF25C20晶圆合封MCU助力企业<b class='flag-5'>降本增效</b>

    N型光伏电池降本增效:铜电镀技术驱动行业发展

    铜电镀技术是近年来异质结电池实现降本增效的重要技术路线之一,其优势在于比传统银浆的导电性能强,且低接触电阻,使用铜电镀技术可提升转换效率。在银价不断波动的市场行情下,铜电镀技术受到诸多生产商关注
    的头像 发表于 03-21 08:32 596次阅读
    N型光伏电池<b class='flag-5'>降本增效</b>:铜电镀技术驱动行业发展

    新品上市,公有轻安防就选目凌云! #人工智能 #目 #目凌云 #百度智能

    人工智能百度智能
    jf_98614062
    发布于 :2024年02月19日 11:39:42

    【分享】用PPEC3天打造电源方案

    芯片,其融合了电力电子核心算法,覆盖常用拓扑结构,采用图形化平台及菜单式配置实现了电源的免代码快速开发,电源研发企业提供降本增效解决方案,助力数字电源行业高速发展。森木磊石技术团队
    发表于 01-17 11:50

    北成新控:以用户为导向,可定制化高精度直线模组降本增效正当时

    有限公司引进全球知名品牌汤姆森THOMSON直线模组,提供定制化解决方案,解决精度难以控制的问题。未来将推出更多降本增效的服务方案,为企业带来更好更高质量的产品和
    的头像 发表于 01-11 13:14 525次阅读
    北成新控:以用户为导向,可定制化高精度直线模组<b class='flag-5'>降本增效</b>正当时

    天合光能全新一代光储系统助力工商业降本增效

    10月26日,在第七届分布式能源嘉年华上,天合光能分享了全新一代光储系统,针对分布式能源多场景的解决方案:天合光能210+N高效组件+天合储能工商业解决方案-Potentia蓝海,助力工商业降本增效
    的头像 发表于 10-30 16:39 923次阅读

    聚焦降本增效 拉普拉斯IPO加码行业布局

    降本增效是光伏行业持续发展的目标,过去十余年,光伏行业在降本增效层面取得了巨大的进步和成就。随着设备工艺、技术等逐渐成熟,行业内领先企业开始在新型高效光伏电池片领域进行布局,TOPCon、XBC
    的头像 发表于 10-10 17:16 319次阅读

    降本增效时代,锂电正极材料如何“智造”升级?

    目前来看,行业内数字化、智能化转型正从观念、目标、口号过渡至具体方案落地、逐步向锂电全域工厂渗透。以数字化、智能化技术为媒,助力工厂优化生产模式,真正实现由制造到“智造”,达到极致“
    的头像 发表于 09-18 15:38 459次阅读

    软硬件免费提供,360安全云助力企业降本增效

    360全面发力安全托管运营服务,颠覆传统商业模式,软硬件均免费,客户只需要根据需求为服务付费,固定成本收入大幅降低,真正实现降本增效
    的头像 发表于 09-01 14:39 401次阅读
    软硬件免费<b class='flag-5'>提供</b>,360安全云助力企业<b class='flag-5'>降本增效</b>

    制造业降本增效的关键策略与实践

    在当前竞争激烈的制造业市场,降本增效成为企业追求盈利和持续发展的核心目标。通过有效的管理和创新实践,制造业企业可以取得降低成本、提高效率的显著成果。本文将着重探讨几个关键策略与实践,帮助制造业企业
    的头像 发表于 08-30 21:18 668次阅读
    制造业<b class='flag-5'>降本增效</b>的关键策略与实践

    智能测量仪轧钢行业合规增效支哪些招?

    提供品质保证,其能适用于轧钢现场、能经受住轧材1300℃左右的高温考验,能对检测信息进行智能分析等功能,在轧钢生产中起到了重要的作用,降本增效、提升品质。 智能测量仪
    发表于 08-16 18:04

    解锁“降本增效”新技能 纵行科技IoT技术赋能汽车供应链物流可视化

    在汽车供应链物流领域,ZETA等物联网技术的应用,提升了供应链物流数据的抓取效率和数据源质量,能够很好地帮助企业提升数字化转型的完成度和落地效果。纵行科技ZETag汽车供应链物流可视化方案,帮助客户实现降本增效的同时,也为汽车行业发展带来了增量价值和全新的技术
    的头像 发表于 08-01 11:06 692次阅读
    解锁“<b class='flag-5'>降本增效</b>”新技能 纵行科技IoT技术赋能汽车供应链物流可视化

    信捷成套物联网解决方案,助力细纱工厂智能化改造

    信捷物联网解决方案提供了创新的管理方式,整合了设备智能化改造、云平台和数据分析技术,能够实时监控生产过程,及时发现和解决潜在问题,提高产量和质量;数字化管理模式帮助工厂优化产能计划,减少资源浪费,实现
    的头像 发表于 07-18 15:07 573次阅读
    信捷成套物联网<b class='flag-5'>解决方案</b>,助力细纱工厂<b class='flag-5'>智能</b>化改造

    镕铭微电子VPU如何降本增效

    解决方案架构总监——蔡媛Amy,为大家介绍镕铭微电子VPU如何帮助客户实现极致增效降"本",并介绍基于新一代Quadra VPU的全球首个硬件智能极速高清产品,如何将历来成本高企的AI增强视频产品带入到规模应用中。      
    的头像 发表于 06-12 09:33 923次阅读
    镕铭微电子VPU如何<b class='flag-5'>降本增效</b>

    纵行科技以IoT技术助力汽车供应链物流可视化,实现降本增效

    在供应链物流领域,纵行科技为客户提供基于ZETA LPWAN的“仓网+路网”的物联网基础设施,服务供应链物流行业实现资产盘点、出入库签到、货物在途追踪可视化,为客户决策提供数据支撑,实现运营管理降本增效
    的头像 发表于 06-07 16:16 472次阅读
    纵行科技以IoT技术助力汽车供应链物流可视化,实现<b class='flag-5'>降本增效</b>