0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何利用冷存储解决数据日益增长的问题

存储D1net 来源:企业网D1Net 作者:Davide Villa 2021-09-22 16:57 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着全球生成和存储的档案数据比以往任何时候都要多,冷存储正在成为该行业增长最快的细分市场。随着越来越多的数据被存储,云计算供应商正在通过可访问的档案重塑他们的架构,以跟上数据增长的步伐并确保有效管理。

体育产业如今成为产生下一代技术和大量数据的温床。随着每一赛季的结束,将不断涌现数字内容。从跟踪球员的统计数据和表现分析,到从多个摄像机角度、在各个体育场馆中捕捉每场比赛中每一个动作的视频片段,大量数据都需要存储在某个地方。

为了在捕获实时动作的同时逐分钟提供数据丰富的文件,数据管理团队必须决定将热数据、温数据或冷数据存储在何处,具体取决于他们需要访问数据的速度和频率。

但这不仅仅是体育产业面临的问题。专家估计,全球数据量每年增长约30%,到2025年可能会产生175ZB的数据。虽然并非所有数据都需要立即分析,但存储是必不可少的,这就是冷存储发挥作用的地方。

冷存储的兴起

冷存储用于保留未在使用的数据,这些数据可以存储在档案中,也称为“冷”存储。这些是成本较低、不常访问的存储层,而不是需要立即访问的实时“热”数据(如金融交易)。

行业分析师认为,这是一个短期内不会消失的存储细分市场,60%或更多的数据可以存档或存储在更冷的存储层中,直到需要采用为止。

随着全球生成和存储的档案数据比以往任何时候都要多,冷存储正在成为该行业增长最快的细分市场。随着越来越多的数据被存储,云计算供应商正在通过可访问的档案重塑他们的架构,以跟上数据增长的步伐并确保有效管理。

采用冷存储的好处

随着数据的增加并达到ZB时代;存储的数据越多,成本就越高。大量数据通常是非结构化或半结构化数据,例如视频片段、基因组学或用于训练机器学习人工智能的数据。其中很大一部分可以存储在二级冷存储中,远远低于热存储的成本。对于那些虽然是活动流程的一部分但不需要立即采用的数据,以较低的成本将其存储在较冷的存储池中可能是一种解决方案。

但是,使用冷存储时最大的考虑因素是企业需要访问数据的频率或数据的可用性。如今的云存储服务级别协议是围绕数据需要访问的频率以及客户愿意等待多长时间来检索数据而构建的。云计算提供商可能需要5到12个小时才能访问存储在较冷层中的数据,而存储在较热层中的数据可以立即使用,但需要支出更多的费用。

除了成本和可访问性的考虑因素之外,最终用户的心理是第三个因素。删除任何内容让人难以接受,以防在某个时候可能需要它而永远不知道哪些数据以后会有价值。

目前有哪些选择?

直到最近,大多数二级冷存储都包含在磁带或硬盘驱动器(HDD)上,热数据转移到SSD硬盘上。然而,根据Horison Information Strategies公司的调查,到2025年,归档数据可能会达到所有捕获数据的80%或更多,使其成为迄今为止规模最大、增长最快的存储类别,这将带来巨大的存储挑战。此外,数据的价值通常与访问和挖掘数据的能力有关。换句话说,数据可访问性增加了数据价值。

虽然磁带存储比HDD硬盘便宜,但它也具有更高的数据访问延迟,使其成为仅用于冷存储的选项。HDD硬盘正在向下一代磁盘技术和平台发展,以提高拥有成本和归档解决方案的可访问性。HDD硬盘技术的最新进展包括新的数据放置技术,如硬盘分区、更高的分区密度、机械创新、智能数据存储和新材料创新。

冷存储将如何发展?

拥有最大数据池的超大规模厂商和数字内容创建者正在寻找最具成本效益的方式来存储其不断增加的数据量。为了满足数据存储需求,新的冷存储层正在出现,IT组织正专注于重塑档案存储架构以做好准备。

随着存储最长久的数据所需的时间超过一个世纪,经得起时间考验的面向未来的冷存储解决方案将成为关键。为了确保它们的持久性,行业厂商正在开发诸如DNA、光学甚至海底深度冷冻存储等创新技术。

最近成立的DNA数据存储联盟是推动冷存储领域发展的众多活动之一。由于其高密度,DNA能够将大量信息打包到一个很小的空间中,并且可以存在数千年,使其成为档案存储的一种有吸引力的存储介质。

随着ZB数据时代带来了从可持续性到可访问性的挑战,冷存储将被证明是以可承受的价格保存数据不可或缺的一部分,并考虑到数据的使用寿命。因此,需要不断创新来创建长期数据存储解决方案,使具有价值的数据在近期和未来都可以访问。

版权声明:本文为企业网D1Net编译,转载需在文章开头注明出处为:企业网D1Net,如果不注明出处,企业网D1Net将保留追究其法律责任的权利。

编辑:jq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据
    +关注

    关注

    8

    文章

    7315

    浏览量

    94002
  • SSD
    SSD
    +关注

    关注

    21

    文章

    3061

    浏览量

    121817
  • 数据存储
    +关注

    关注

    5

    文章

    1016

    浏览量

    52631
  • DNA
    DNA
    +关注

    关注

    0

    文章

    244

    浏览量

    31952
  • HDD
    HDD
    +关注

    关注

    0

    文章

    155

    浏览量

    28626

原文标题:冷存储如何解决数据日益增长的问题

文章出处:【微信号:D1Net11,微信公众号:存储D1net】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    突发!存储全面涨价!

    领域日益增长存储需求的推动,基于此,Sandisk决定对所有渠道和消费者客户的产品价格调涨10%以上。为了确保能提供高性能闪存解决方案并支持持续的创新投资,Sandisk目前正在对闪存产品组合进行价格调整。   Sandisk表示,即日起这些调整仅适用于新的报价和订
    的头像 发表于 09-13 09:12 8552次阅读
    突发!<b class='flag-5'>存储</b>全面涨价!

    未来的数据中心需要怎样的布线方案

    如何降低能耗、减少碳排放、降低冷却需求等,从而推动数据中心的可持续发展。 对可持续数据中心的需求日益增长 随着数字技术的快速发展,数据中心已成为现代社会的重要组成部分。它们在幕后处理和
    的头像 发表于 11-20 10:13 65次阅读

    OTP存储器在AI时代的关键作用

    一次性可编程(OTP)非易失性存储器问世已久。与其他非易失性存储技术相比,OTP的占用面积更小,且无需额外的制造工序,因此成为存储启动代码、加密密钥等内容的热门选择。尽管听起来简单,但随着人工智能(AI)的大规模部署和对更先进技
    的头像 发表于 10-21 10:38 1303次阅读
    OTP<b class='flag-5'>存储</b>器在AI时代的关键作用

    慧荣科技如何打造车规级存储解决方案

    随着自动驾驶与智能网联汽车的飞速发展,数据已成为现代汽车的“新燃料”。自动驾驶技术将持续推动闪存技术的创新,以满足其在速度和数据存储方面日益增长的需求。在这一趋势下,如何确保海量
    的头像 发表于 09-15 16:10 808次阅读

    Ceph分布式存储系统解析

    在当今数据爆炸的时代,企业对存储系统的需求日益增长,传统的集中式存储已经无法满足大规模数据处理的要求。分布式
    的头像 发表于 07-14 11:15 740次阅读

    是德科技AI驱动的超高速传输测试论坛前瞻

    随着人工智能(AI)技术的不断进步和应用场景的拓展,对数据中心基础设施的需求日益增长。为了支撑复杂的算法训练、海量数据处理以及实时推理,对数据中心的计算能力、
    的头像 发表于 06-06 14:29 738次阅读

    PolarDB×ADB双擎驱动 华鼎链打造数据智能反应堆

     华鼎链科技X阿里云瑶池数据库  打造全链路协同的智慧链新标杆  在链数字化转型浪潮中,华鼎链科技再次引领行业变革。近期,华鼎
    的头像 发表于 04-15 15:13 409次阅读
    PolarDB×ADB双擎驱动 华鼎<b class='flag-5'>冷</b>链打造<b class='flag-5'>冷</b>链<b class='flag-5'>数据</b>智能反应堆

    SK海力士仅选择器存储器(SOM)的研发历程

    人工智能与高性能计算(HPC)正以空前的速度发展,将动态随机存取存储器(DRAM)和NAND闪存等传统存储技术发挥到极致。为了满足人工智能时代日益增长的需求,业界正在探索超越传统存储
    的头像 发表于 04-03 09:40 1618次阅读

    赛昉科技RISC-V家庭云解决方案:NAS存储性能升级,隐私安全双保障

    随着智能手机、平板电脑等设备的普及,用户对数据存储和共享的需求日益增长。在“三网融合”与云计算技术快速发展的背景下,赛昉科技基于自主研发的RISC-V架构硬件平台——昉·星光2
    的头像 发表于 02-18 17:50 1313次阅读
    赛昉科技RISC-V家庭云解决方案:NAS<b class='flag-5'>存储</b>性能升级,隐私安全双保障

    浪潮信息存储SATA SSD:技术创新引领数据存储新时代

    在智慧时代,数据存储需求日益增长,对存储产品的性能和稳定性提出了更高要求。浪潮信息存储,作为行业内的佼佼者,积极响应市场需求,通过自主研发,
    的头像 发表于 02-07 13:41 1027次阅读

    美光科技70亿美元打造新加坡存储芯片厂

    随着人工智能技术的迅猛发展,对先进存储芯片的需求日益增长。在此背景下,美光科技宣布将在新加坡投资70亿美元,扩建其制造业务,以满足市场需求。 周三,美光科技在新加坡的新工厂正式破土动工。据悉,该工厂
    的头像 发表于 01-09 11:34 1403次阅读

    MTP在云存储中的应用前景

    随着信息技术的飞速发展,数据量呈爆炸式增长,传统的存储方式已经无法满足日益增长数据存储需求。云
    的头像 发表于 01-03 10:31 986次阅读

    2024德州仪器新能源技术直播回顾

    能源为我们的生活提供动力,而生成能源以及储存能源的技术,对于可持续发展更是具有不可估量的价值。一方面通过更有效地利用存储和分配能源,能源被高效利用从而满足日益增长的能源需求;另一方面
    的头像 发表于 12-30 10:45 970次阅读

    浪潮信息剖析智能时代数据存储领域面临的挑战与机遇

    在当今数字化时代,算力与存力的协同增长已成为驱动各行各业发展的关键力量。特别是在人工智能(AI)这一前沿领域,随着数据量的爆炸式增长,对存储系统的需求
    的头像 发表于 12-30 09:43 1207次阅读

    AI加速采用推动存储器市场2025年显著增长

    。 报告指出,随着AI技术的不断兴起,特别是在机器学习和深度学习等数据密集型应用中,对高带宽内存(HBM)的需求呈现出前所未有的高涨态势。预计到2025年,HBM的出货量将实现同比70%的大幅增长。这一增长主要归因于
    的头像 发表于 12-26 14:43 1033次阅读