0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

希捷CORTX加速对象存储创新,数据的开源普惠

工程师邓生 来源:中关村在线 作者:徐鹏 2020-11-30 14:38 次阅读

数字经济正在成为现代社会发展的重要指标,数据作为数字经济体中的核心资源,也扮演着更加关键的角色。在指数级增长的数据规模背后,如何高效处理纷繁复杂的数据集和数据类型,是每家企业都在思考的问题,尤其是当非结构化数据变成了企业内部未经开发的“重要价值”。“数据中蕴藏着无尽的价值,企业的成功与数据价值的挖掘息息相关。希捷持续秉承开放、共享及合作的原则,进行技术突破和产品创新。”在Let’s Rethink Data希捷科技线上峰会上,希捷科技全球副总裁暨中国区总裁孙丹表示。

而希捷此次发布的对象存储软件CORTX和CORTX开源社区,就是开放合作和技术创新的最佳实践,同时,希捷还推出了融合基础架构解决方案Lyve Drive Rack。由此,CORTX也上升为公司的重要战略之一。根据希捷以IDC调研为基础发布的《数据新视界:从边缘到云,激活更多业务数据》报告,未来两年,企业数据将会以42.2%的速度增长。数据的多元化不仅对计算的异构性提出新需求,其密集型工作负载对数据的存储、治理、运营同样挑战巨大。CORTX的发布,简单来说就是帮助企业客户部署导入更为优化的数据存储架构。

无论是传统企业的数据挖掘和云化转型,还是互联网企业的超大规模数据中心建设,要想存储更多的数据,最直接的方法就是利用技术红利让硬盘存得更多、成本更低。但是落地到客户一侧,考虑到采购周期、部署成本、内部流程、操作难易度等因素,并不是每家企业都会在第一时间用上最新的产品,而软件化的交付和开源技术,则可以快速让客户使用大容量硬盘,有效降低TCO。要知道,以往软件+硬件绑定“卖盒子”的方式在一定程度上拖累了企业采用新产品的进度。

IDC预测,到2025年全球数据总量将达到175ZB。在企业组织的存储系统中,非结构化数据占据了数据总量的80%-90%。无论是金融行业的数据分析还是医疗行业的影像资料,亦或是教育行业的教学文档、媒体行业的音视频素材等等,都可以看到非结构化数据的影子。然而在非结构化数据高占比的趋势之下,仅有极少的数据被有效利用,其原因在于企业缺乏有效的使用途径,如对象存储曾被认为是一种仅用于合规、归档、次级或冷数据的存储,但如今并非如此。

事实上,已有越来越多的企业在使用对象存储支撑实时、智能化、高性能的工作负载,除了要满足性能和存储扩展性的需求,还要获得数据洞察以便更好地做出决策。与此同时,更好、更快的数据访问能够让非结构化数据成为营收增长的重要推动力。调查显示,只要数据可访问性增加10%,就能带来超过6500万美元的额外净收入。为了更好地激活数据,企业需要开放的架构、新的管理策略,来快速地整合并分析海量的、动态的数据。

“我们把CORTX开源之后,希望大家都可以在上面开发自己的对象存储应用,快速使用到希捷的大容量硬盘。”孙丹谈到,“我们是最了解大容量数据和软件兼容的供应商,我们可以完全不受硬件限制,客户只需要用我们的软件平台,当然用其它硬件也可以,我们已经针对大容量硬盘设计好了配套的对象存储软件平台。”由此,传统客户和服务商可以不受技术门槛的限制,第一时间使用到最新的存储技术和产品。

据了解,CORTX兼容swift、S3等主流云服务商使用的所有对象存储软件,在应用时可以混用不同容量硬盘,而不会影响性能和兼容性,实现利旧最大化。结合硬件参考解决方案,用户可以对硬件进行定制化配置,集成一些第三方组件,如针对I/O进行优化的软件等等。

借助CORTX,可以将HAMR、MACH.2等技术快速普惠到客户的业务场景中,大容量盘的替换可以在有限空间内大幅节省部署成本。以某客户部署可靠性11个9的对象存储集群为例,相较传统的Ceph,使用CORTX结合高密度存储硬件可让每TB造价降低一半。

与CORTX对象存储相结合,Lyve Drive Rack提供了一种紧密集成的融合基础架构解决方案,容量最高可达1.7PB,无需支付高昂的存储软件授权费用。Lyve Drive Rack能在一致的对象、键值、文档和集群中实现可扩展的性能,采用100%开源代码,可降低对固定供应商的依赖,并且不限供应商的管理界面,兼容SSPL和Redfish/Swordfish。

Lyve Drive Rack

希捷科技中国区资深解决方案工程师李蓁介绍称,希捷的对象存储解决方案在设计之初就针对AI机器学习等特性进行了调优,用户可以直接在CORTX上标注数据,内置的内存键值对能够做到高效检索。同时,Lyve Drive Rack还利用专有芯片大幅降低了纠删码使用时所需的配置内存,通过将纠删码卸载到专用ASIC以确保多层数据保护,实现了更大数据集的数据弹性。

从数据的端到端管理到数据运营,复杂的工作场景和多平台迁移对数据的采集、存储、分析提出了更高的要求,供应商不仅要应对指数增长的数据规模,还要解决企业内部和流程中的数据拉通和管理问题,并根据数据训练和推理给出预测。数据管理阶段,希捷会集成第三方组件,如CORTX部署硬件时结合VMware等解决方案,之后接入HAMR HDD,通过各类软硬件结合的形式覆盖数据的全生命周期。

“从一开始热度高的时候,我们可以结合第三方的组件来实现数据访问更高效的响应。”李蓁表示,“到了数据生命周期的中后期,可以通过CORTX软件,再把数据进行分层,把这些已经热度降低的数据存入到HDD硬盘里面,实现数据保存效率的提升以及成本的降低。”

CORTX可以帮助企业进行超大规模存储架构的应用和普及,实现有效、快速且经济地部署对象存储,打开数据新视界的新征程。据悉,希捷科技的8家中国客户与合作伙伴新华三集团、同有科技、宏杉科技、UIT创新科、五舟科技、鲸鲨软件、极道科技以及柏科数据等,将就CORTX开源软件与开源社区,与希捷展开更深层次的合作,共同提升对象存储解决方案。“希捷将继续与业界合作伙伴紧密携手,针对市场需求以及应用特点,共同推出更为定制化的、契合需求的解决方案,助力企业的数字化转型征程,为发挥数字生产力的极致价值而努力。”孙丹说。

责任编辑:PSY

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 希捷
    +关注

    关注

    2

    文章

    211

    浏览量

    41546
  • 开源
    +关注

    关注

    3

    文章

    2985

    浏览量

    41718
  • 对象存储
    +关注

    关注

    0

    文章

    65

    浏览量

    11897
  • 大数据
    +关注

    关注

    64

    文章

    8649

    浏览量

    136587
收藏 人收藏

    评论

    相关推荐

    率先采用希捷银河Exos X24,百度联手希捷全面驾驭数据力量

    在现今数据激增的时代,存储技术已成为了行业关注的焦点。作为数据存储领域的领军企业,希捷科技始终站在技术前沿,致力于为全球用户提供高效、可靠的
    的头像 发表于 02-26 15:16 228次阅读

    开鸿智谷廖秋林:践行开源战略,推动商业创新

    随着万物智联时代加速到来,OpenHarmony、人工智能、云计算等核心技术正在通过开源实现共享、开发、创新和迭代,开源技术逐渐成为数字经济发展中重要的版块,正
    的头像 发表于 12-27 08:30 277次阅读
    开鸿智谷廖秋林:践行<b class='flag-5'>开源</b>战略,推动商业<b class='flag-5'>创新</b>

    对象存储有什么用

    对象存储(Cloud Object Storage,COS)是一种存储海量文件的分布式存储服务,具有高扩展性、低成本、可靠安全等优点。 对象
    的头像 发表于 11-01 16:02 259次阅读
    <b class='flag-5'>对象</b><b class='flag-5'>存储</b>有什么用

    POSIX适合对象存储吗?

    最近,留意到 MinIO 官方博客的一篇题为“在对象存储上实现 POSIX 访问接口是坏主意[1]”的文章,作者以 S3FS-FUSE 为例分享了通过 POSIX 方式访问 MinIO 中的数据时碰到了性能方面的困难,性能远不如
    的头像 发表于 10-29 10:19 372次阅读
    POSIX适合<b class='flag-5'>对象</b><b class='flag-5'>存储</b>吗?

    希捷:构建数智未来,存储大有可为

    中,存储定然大有可为,我们也深度投入到面密度创新以及产品升级中,铸就海量可靠的存储解决方案,引领安防存储发展新格局,为‘数字中国’和数字城市的建设打造坚实的
    的头像 发表于 10-26 09:42 378次阅读
    <b class='flag-5'>希捷</b>:构建数智未来,<b class='flag-5'>存储</b>大有可为

    数据对象的一些基本知识

    数据库的功能就是组织管理和存储各种数据对象数据库中的对象是我们进行
    的头像 发表于 10-09 16:42 369次阅读

    加速数据和计算存储应用

    电子发烧友网站提供《加速数据和计算存储应用.pdf》资料免费下载
    发表于 09-15 15:05 0次下载
    <b class='flag-5'>加速</b>大<b class='flag-5'>数据</b>和计算<b class='flag-5'>存储</b>应用

    再获权威认可!浪潮信息获选Forrester全球对象存储卓越厂商

    信息等国内外主流数据存储厂商进行分析, 浪潮信息凭借对金融、医疗、教科研等重点行业和场景应用的全面布局与技术创新,作为中国唯二专业存储厂商入选优质
    的头像 发表于 09-11 16:40 222次阅读

    通过博通和希捷实现卓越的数据中心性能双执行器硬盘存储

    电子发烧友网站提供《通过博通和希捷实现卓越的数据中心性能双执行器硬盘存储.pdf》资料免费下载
    发表于 08-22 10:31 0次下载
    通过博通和<b class='flag-5'>希捷</b>实现卓越的<b class='flag-5'>数据</b>中心性能双执行器硬盘<b class='flag-5'>存储</b>

    华秋硬创联合安创加速器,加速创新赋能技术驱动型创业者

    167亿,获2轮及以上融资的企业占比达54%。 02****生态伙伴介绍:安创加速器 **安创加速器作为Arm全球唯一加速器,依托于Arm全球庞大的生态系统资源及行业领先的技术,**通过创业
    发表于 08-18 14:37

    希捷科技:具有周期性价值的全球云存储之王

    总结: (1)根据Statista的数据希捷科技是全球硬盘驱动器市场的领导者,在全球拥有约43%的市场份额。 (2)希捷科技的管理层近期已经宣布了一项成本削减计划,目标是到第一季度减少2亿美元
    的头像 发表于 06-11 17:46 600次阅读
    <b class='flag-5'>希捷</b>科技:具有周期性价值的全球云<b class='flag-5'>存储</b>之王

    2023开放原子全球开源峰会即将盛大举行,开源赋能,未来!

    160秒看懂你身边离不开的开源科技# 作为当下最重要的技术创新和协同发展模式,这份开源“说明书”居然和七巧板如此适配!6月11-13日,2023开放原子全球开源峰会# 即将盛大举行,
    发表于 06-02 15:32

    开源数据库迎来技术创新拐点|2023 开放原子全球开源峰会开源数据库分论坛即将启幕

    作为数字化转型的核心基础软件,数据库正在与开源技术结合,走向自主创新的新征程。开源模式已成为全球数据
    的头像 发表于 06-01 16:28 292次阅读
    <b class='flag-5'>开源</b><b class='flag-5'>数据</b>库迎来技术<b class='flag-5'>创新</b>拐点|2023 开放原子全球<b class='flag-5'>开源</b>峰会<b class='flag-5'>开源</b><b class='flag-5'>数据</b>库分论坛即将启幕

    开源数据库迎来技术创新拐点|2023开放原子全球开源峰会开源数据库分论坛即将启幕

    作为数字化转型的核心基础软件,数据库正在与开源技术结合,走向自主创新的新征程。开源模式已成为全球数据
    的头像 发表于 05-31 08:25 364次阅读
    <b class='flag-5'>开源</b><b class='flag-5'>数据</b>库迎来技术<b class='flag-5'>创新</b>拐点|2023开放原子全球<b class='flag-5'>开源</b>峰会<b class='flag-5'>开源</b><b class='flag-5'>数据</b>库分论坛即将启幕

    报名开启!开放原子开源大赛OpenHarmony创新赛来啦!

    大赛背景 开放原子开源大赛OpenHarmony创新赛期望达到以赛促用、以赛促教、以赛促学、以赛促练、以赛促创的效果,开发者通过学习OpenHarmony,开发出具有创新性,实用性的开源
    发表于 05-17 16:52