0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

QLC固态硬盘将成企业新宠!和Solidigm高管探讨未来企业级存储发展趋势

jf_MYvksKR0 来源:Microcomputer 2023-06-13 16:16 次阅读

随着5G、大数据、云计算物联网乃至AI预训练大模型等技术的不断演进,数字化浪潮正在推动全人类社会朝向新的文明层次快速发展。数字化永远无法回避的一个话题就是数据存储。有意思的是,曾经不被看好的QLC产品,竟在云计算和数据中心市场,迸发出新的活力,有望逐步成为企业级存储主力之选……

圆周率计算迎来新的世界纪录

前不久,StorageReview团队在位于美国辛辛那提的实验室中使用第四代AMD EPYC CPU和Solidigm D5-P5316 QLC SSD,进行圆周率(π)小数点后100万亿位数的计算,最终的成绩成功打破世界纪录,其速度几乎达到此前的3倍(原纪录由Google于去年6月创造,共运行近158 天),总运行时间缩短至59天10小时46分49.55秒。其中,基于4bit单元QLC闪存的Solidigm D5-P5316可用容量为530.1TB,测试中使用峰值为514.5TB,总读取量为40.2 PB,写入35.4 PB,总计数据吞吐量高达75.6 PB。该团队负责人Beeler表示:“QLC非常适合这类工作负载。它支持突发写入和频繁写入,如果我们保持每天向每个驱动器发送接近30TB的数据写入的节奏,每年的数据写入将超过10PBW。事实证明,QLC SSD完全可以跟上计算速度,并在单个服务器中提供巨大的存储密度。此外,在近60天的测试中,我们发现SSD耐用性的消耗几乎可以忽略不计。”这次的测试几乎颠覆了绝大多数人对于QLC SSD的固有印象。

1034c596-0925-11ee-962d-dac502259ad0.png

▲第四代QLC SSD在存储密度提升的同时,还带来了满足散热、边缘化、非结构化和云端化需求等多方面的优势和便利。

作为SSD的核心组件,NAND闪存经历了SLC、MLC、TLC、QLC四代演进,每单元存储数据从1bit发展到2bit、3bit、4bit。不过伴随着每单元存储位数增加,电压变化也逐级递增,而电压频繁切换会导致更多的错误和更长的擦除时间,表现出来就是写入速度更低、寿命更短、可靠性更差。尤其是在消费级市场,多数消费者对于SSD的选择更倾向于TLC,而非QLC。所以此次新的圆周率计算世界纪录诞生时,Solidigm D5-P5316作为一款QLC产品的表现,尤其是对于容量、成本、性能和耐用性的兼顾,着实令人感到意外。

QLC SSD整体性能大翻身?

无独有偶,SK海力士收购Intel NAND闪存业务重组而来的Solidigm,很快又发布了同样基于QLC闪存的全新企业级产品P5-D5430,再次引发了“QLC取代TLC”的话题讨论。据悉,P5-D5430采用大连Fab 68工厂出品的192层堆叠3D QLC闪存芯片(该厂的QLC产品占40%以上),容量从3.84TB到30.72TB不等(E1.S款最大容量为15.36TB),128K顺序读写速度最高为7GB/s和3GB/s,4K随机读写速度最高达971K IOPS和120K IOPS。而且它还具备高达90% IOPS一致性,以及大约6%的硬盘寿命可变性。简单说就是整体的可靠性更趋于一致,读写表现也非常平稳。

1078aa54-0925-11ee-962d-dac502259ad0.png

▲D5-P5430 30.72TB容量的产品预计今年下半年量产

从Solidigm的官方数据来看,相对其举例的企业级TLC产品,P5-D5430在顺序/随机读取性能上已经赶超了前者,但它却可以轻松实现更大的容量,以及最多14%的写入寿命提升(相对固定的写入负载下,对闪存擦写寿命的消耗速度会随容量上升而放缓)。也就是说,目前QLC产品唯一的弱势之处,只剩写入性能。而可能很多人想不到的是,QLC在企业和数据中心市场,写入性能这一指标在存储设备采购考量中的优先级,并没有那么靠前。

1090d03e-0925-11ee-962d-dac502259ad0.png

▲QLC和TLC SSD各项性能的实例对比

Solidigm亚太区应用工程部总监翁昀表示,对于存储设备,“除了关注性能参数,还要看一下实际的工作负载是什么样的……一些AI模型在3年内增长了1万倍以上,高清电影的数据量比几年前大9倍……数据读写方式在更多的使用场景里还是以读为主。几年前我和一家互联网公司交流过,他们主流的内容分发网络里,读7天,然后花一个晚上去做一些写入,然后再读7天,再花一个晚上写入。在94%的企业级工作负载当中,80%是读,20%是写。所以TLC SSD其实对于有些工作负载而言,并非最佳选择。”


AI时代对存储的需求到底是什么?

事实的确如此,甚至在AI时代“读多写少”会表现得更加明显。我们知道,AI业务中除了个别业务场景主要针对结构化数据进行分析外(例如消费记录、交易记录等风险控制、趋势预测场景),大多数场景需要处理的是非结构化数据,例如图像识别、语音识别自动驾驶等,这些场景通常使用的是深度学习算法

这也就意味着AI时代,存储领域面临四大挑战。

一是容量需求。人类社会产生的数据量正在以惊人的速度增长,预计到2025年全球每天将创建约463EB数据。5G、AI、物联网等应用源源不断地催生了大量数据流,它们各自提出了深度数据存储和随机速度的要求。

二是海量小文件。由于训练任务需要的文件数量都在几亿到十几亿的量级,所以存储需要能承载几十亿甚至上百亿的文件数量。同时,由于很多训练模型都是依赖于图片、音频片段、视频片段文件,而这些文件的大小大部分都是在几KB到几MB之间。

三是读多写少。AI环境的数据特点是读多写少,以视觉识别为例,它需要加载数千万甚至上亿张图片,针对图片使用卷积神经网络、ResNet等算法,生成识别模型。完成一轮训练后,为了减少图片输入顺序的相关性对训练结果带来的影响,会将文件次序打乱之后,重新加载,训练多个轮次。这就意味着每个轮次都需要根据新的顺序加载数千万乃至上亿张图片,因此对于存储的高吞吐、低延时提出了更高的要求。

四是可靠性。比如AI业务不同环境的数据组织方式不可控,很有可能用户会将大量文件存放在同一个目录,容易导致多个计算节点在训练过程中同时读取这一批数据,这个目录所在的元数据节点就会成为热点。那么目录热点读取的可靠性,存储介质在读取状态下的均衡性和平稳性就需要有所保障。

QLC产品总体拥有成本的巨大优势

其实一言以蔽之,大数据时代,或者说企业的数字化转型或是AI业务发展等多种需求下,多数场景存储的工作负载都处于“读多写少”的状态。在大部分场景中,如预训练任务只读取文件,中间很少产生中间数据,即使产生了少量的中间数据,也是会选择写在本地,很少选择写回存储集群。Solidigm援引相关数据指出,2020~2023年全球范围出货的数据中心级SSD,大约85%的每日全盘写入次数(DWPD)还不到1,甚至大多数SSD都不会有DWPD的评级。

1103334a-0925-11ee-962d-dac502259ad0.png

▲对比全TLC阵列,以D5-P5430组成的7PB存储方案总体拥有成本更低。

此外,Solidigm D5-P5430产品具备U.2 15mm、E1.S 9.5mm和E3.S 7.5 mm等多种接口规格,最大容量达到30.72TB(将于年末推出),可以凭借大容量低成本的优势,更好地满足非结构化数据存储的需求。对比7PB全TLC阵列对象存储解决方案,它可以直接缩减一半的固态硬盘和服务器需求,降低18%的电力成本和33.3%的机架占地面积,功率密度提升26%,企业总体拥有成本降低27%。至于混合阵列方案,D5-P5430相对应的优势则更加显著,总体拥有成本降低多达39%。Solidigm亚太区销售总监倪锦峰还透露,“可持续性方面,HDD的年失效率现在是很高的,差不多在3%左右,这会导致后续废物处理的很多挑战,但是我们的SSD承诺的年失效率是0.44%,实际使用要比这个值低很多。也就是说(使用我们的QLC SSD)除了能减轻运维压力,后续废弃物处理的麻烦也会少很多。”

1190c494-0925-11ee-962d-dac502259ad0.png

▲对比HDD+TLC SSD阵列的话,QLC整体成本优势更加突出。

写在最后

随着5G、大数据、云计算、物联网和AI技术的快速发展,数字化变革浪潮已是席卷各行各业,数据生成和存储需求呈现指数级增长态势,这也使得存储技术必须不断发展才能跟上新的工作负载和需求转变。在QLC SSD刚推出的时候,许多存储厂商都将首发目标对准了企业级市场,而不是消费级,原因就在于3D NAND技术通过堆栈更高的层数,可以轻松实现更大的存储密度,因此QLC颗粒的优势更适合大容量数据盘。

而如今通过最新的QLC产品,我们看到除了在带宽、读取性能、整体可靠性和耐用性等核心性能方面,QLC SSD在部分表现上已经追上TLC产品,还凭借着更高的存储密度,可以轻松实现容量和成本上的优势。对于需要平衡性一切因素和性价比的企业级市场来说,QLC产品无疑是更好的选择。因此,我们也看到包括京东、阿里、联想、戴尔在内的一众科技巨头,都已经开始成规模地选用QLC产品。而随着SSD纠错技术的不断迭代,QLC的可靠性也会越来越高,甚至我们可以期待,如果未来QLC产品在价格上与TLC拉开足够的差距之后,QLC会真正迎来逆天改命的新局面,在消费市场也唱响属于它的主旋律。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • SSD
    SSD
    +关注

    关注

    20

    文章

    2689

    浏览量

    115498
  • 固态硬盘
    +关注

    关注

    11

    文章

    1356

    浏览量

    56496
  • 大模型
    +关注

    关注

    2

    文章

    1516

    浏览量

    1115

原文标题:QLC固态硬盘将成企业新宠!和Solidigm高管探讨未来企业级存储发展趋势

文章出处:【微信号:Microcomputer,微信公众号:Microcomputer】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    芯盛智能:企业级SATA固态硬盘SS2000SE正式上市

    4月12日,芯盛智能正式发布企业级SATA固态硬盘SS2000SE,涵盖480GB至3.84TB大容量范围。据官方介绍,SS2000SE基于自研XT6120控制芯片和长江存储3D TL
    的头像 发表于 04-12 14:46 228次阅读

    芯盛智能发布搭载自研控制器芯片的企业级SS2000SE固态硬盘

    4月11日,芯盛智能发布搭载自研控制器芯片的企业级SS2000SE固态硬盘,以高性能、低时延、高可靠、长寿命的特点受到数据中心、运营商、互联网等企业级客户的青睐,为
    的头像 发表于 04-11 11:25 193次阅读

    ScaleFlux明年将推出搭载数据压缩技术的超大容量固态硬盘

    目前业界最高容量的固盘为Solidigm D5-P5336,搭载QLC模式,企业级支持下具备61.44TB储存能力。而另一方面,Nimbus Data在2022年宣布其已研发出200TB的固态
    的头像 发表于 03-29 16:25 355次阅读

    江波龙进军企业级存储,万事俱备坚定高端之路

    存储,不仅补强了江波龙的存储产品线,实现了重点应用领域的全面覆盖,更是江波龙存储业务经营高质量发展的关键动作。 强大的企业级
    的头像 发表于 03-25 14:19 725次阅读

    江波龙企业级存储产品取得显著市场突破

    自2023年1月江波龙推出企业级存储产品FORESEE ORCA 4836系列NVMe SSD与FORESEE UNCIA 3836系列SATA 3.2 SSD以来,这两款产品已经在技术研发和市场
    的头像 发表于 02-27 10:40 457次阅读

    江波龙企业级存储正式量产一周年,交出亮眼“成绩单”

    自2023年1月江波龙首次发布企业级存储产品FORESEEORCA4836系列NVMeSSD与FORESEEUNCIA3836系列SATA3.2SSD以来,企业级存储产品于过去的一年中
    的头像 发表于 02-19 12:56 218次阅读
    江波龙<b class='flag-5'>企业级</b><b class='flag-5'>存储</b>正式量产一周年,交出亮眼“成绩单”

    江波龙企业级存储正式量产一周年,交出亮眼“成绩单”

    自2023年1月江波龙首次发布企业级存储产品FORESEE ORCA 4836系列NVMe SSD与FORESEE UNCIA 3836系列SATA 3.2 SSD以来,企业级存储产品
    发表于 02-06 10:35 115次阅读
    江波龙<b class='flag-5'>企业级</b><b class='flag-5'>存储</b>正式量产一周年,交出亮眼“成绩单”

    企业级SSD-高性能系列固态硬盘推荐

    除了传统的机械盘HDD,固态硬盘SSD也开始慢慢地在企业级硬盘领域发挥重要的作用。由于企业级固态
    的头像 发表于 01-23 16:48 479次阅读
    <b class='flag-5'>企业级</b>SSD-高性能系列<b class='flag-5'>固态</b><b class='flag-5'>硬盘</b>推荐

    固态硬盘、U盘和机械硬盘:不同存储设备之间的特点与选择

    探讨这三种不同的存储设备之间的特点和选择,帮助读者了解其优缺点以及在不同场景下的适用性。 一、性能比较 1.读写速度 固态硬盘的最大优势之一是其出色的读写速度。由于其不依赖机械运动,
    的头像 发表于 01-09 14:14 1072次阅读

    细说企业级SSD的那些高价值特性

    企业级SSD(SolidStateDrive)是基于闪存技术的高性能、高可靠性的固态硬盘,专为满足企业级应用场景的需求而设计。为了满足各种高速数据处理和可靠性要求较高的应用场景,
    的头像 发表于 12-16 08:35 370次阅读
    细说<b class='flag-5'>企业级</b>SSD的那些高价值特性

    永铭固液混合铝电解电容帮助企业级固态硬盘稳定运行

    企业级固态硬盘(SSD)主要应用于互联网、云服务、金融和电信等客户的数据中心,企业级SSD具备更快传输速度、更大单盘容量、更高使用寿命以及更高的可靠性要求。
    的头像 发表于 11-20 16:19 200次阅读
    永铭固液混合铝电解电容帮助<b class='flag-5'>企业级</b><b class='flag-5'>固态</b><b class='flag-5'>硬盘</b>稳定运行

    慧荣科技MonTitanTM平台亮相FMW 2023闪存峰会,为企业级SSD开发提速

    存储器产业生态,交流最新技术与行业趋势。 会议现场,华为、浪潮、Solidum、铠侠、戴尔、慧荣科技等厂商均展出了旗下创新技术和产品。 在慧荣科技与旗下专注于企业级存储领域子公司宝存
    的头像 发表于 09-06 15:34 538次阅读

    Solidigm推出PCIe固态硬盘D5-P5336

    Solidigm战略规划和营销副总裁Greg Matson表示:“AI等现代工作负载及5G等技术的发展正在迅速重塑存储格局。现在,企业对兼具高性价比、大容量,且能够快速访问数据的
    的头像 发表于 07-24 12:07 516次阅读
    <b class='flag-5'>Solidigm</b>推出PCIe<b class='flag-5'>固态</b><b class='flag-5'>硬盘</b>D5-P5336

    一文解读AI未来发展趋势、影响和挑战

    人工智能(AI)是一项重要的技术领域,已经在许多领域中取得了显著的进展。AI的未来充满了无限的可能性和挑战,这篇文章将探讨AI的未来发展趋势、影响和挑战。
    的头像 发表于 06-28 17:21 3177次阅读

    QLC闪存 D5-P5430的基本规格、性能表现

    SK海力士收购Intel NAND闪存业务重组而来的Solidigm,就发布了一款QLC闪存的企业级产品P5-D5430,可以说是QLC SSD的一个代表作。
    发表于 06-09 10:41 554次阅读
    <b class='flag-5'>QLC</b>闪存 D5-P5430的基本规格、性能表现