0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

支持开放计算,西部数据教你打赢创新存储“团战”

话说科技 来源:话说科技 作者:话说科技 2021-08-12 15:23 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

计算机世界

2021年是开放计算项目(OCP)诞生的10周年。

熟悉IT行业的人都知道,数字经济的发展离不开云计算、移动互联网等信息技术带来的低成本、高资源利用率的优势,而这背后离不开数据中心集中化、规模化的支撑。但与此同时,IT基础架构在性能、功耗、部署、管理等方面遇到的挑战也越来越多,数据中心基础架构的重构和升级已经迫在眉睫,而开放计算项目就是在这个背景下诞生的。

2009年,Facebook开始致力于打造全世界最节能的数据中心,以尽可能低的成本实现超大规模的计算能力。通过自行设计数据中心IT设备,到2011年,Facebook的数据中心实现了38%的节能效率提升,并降了24%的运营支出。随后,Facebook联合多家企业共同发起开放计算项目,希望建立起类似开源软件生态系统的协作模式,应用于硬件系统开发的全生命周期。

在此后的十年中,越来越多的公司加入到开放计算生态中,他们通过协作、互动、创意、规范和知识产权共享,一起推动绿色高效数据中心的建设,引导IT产业走向集约、高效、绿色、节能的道路。

目前,开放计算项目的社区成员已经扩展到200多家,包括数据中心设备供应商、云服务商、电信运营商、大企业、IDC供应商、系统集成商以及半导体制造商等等。研究领域也从最初的数据中心基础设施扩展到5G、边缘计算、人工智能等新兴技术和应用。

据IDC预测,开放计算基础设施的市场规模将在未来5年内保持16.6%的年复合增长率,并在2024年达到338亿美元。

企业级存储面临挑战

计算离不开数据,而数据离不开存储,那么什么样的存储架构才符合开放计算的发展趋势呢?在近日举行的第三届开放计算中国社区技术峰会上,西部数据公司副总裁兼中国区业务总经理刘钢分享了他的观点。

pYYBAGEUt7SAQvnAAAjCnWPJ2Y8136.png

西部数据公司副总裁兼中国区业务总经理刘钢

刘钢指出,当今的企业级存储架构正面临四大挑战:

其一,数据正在快速增长:更多的数据产生源将带来更多的容量需求;

其二,存储性能亟待大幅提升:需要更低延时、更高IO性能、更大带宽;

其三,TCO正在增加:需要更低的每TB成本,更低的维护和管理成本;

其四,要支持更高的绿色能源系统标准:需要实现更低的W/IO和W/TB,更低的PUE。

poYBAGEUt7aAEcSgAAJFY0p7QeI233.png

总结起来,企业数据中心需要的存储既要有大容量,又能快速访问,既要降低成本,又要低功耗。

“但是很难有一个存储介质或存储设备可以同时满足这四个方面的需求。”刘钢强调,所以企业需要创新的数据存储基础架构,让存储技术协同发展,即硬盘和基于闪存的固态盘协同发展:一部分是HDD,支持大数据;另一部分是SSD,支持快数据。为此,西部数据推出了分层存储、分区存储和可组合的分解式架构等创新存储解决方案。

分层存储应对不同数据

不同的数据具有不同的特性,有的数据需要大容量,有的数据则需要低时延。为了帮助用户达到最佳存储效果,西部数据针对这两个数据指标,把数据分为极热数据、热数据、温数据、冷数据和极冷数据五层,给不同的数据提供不同的存储介质和设备。

poYBAGEUt7iAZ1nvAAJX3wVka_c008.png

极热存储:有持续低延时需求。可使用DRAM,适合各种应用。

热存储:有低延时、高IOPS、高带宽应用需求。可使用高性能SSD,适合HPC、OLTP、自动驾驶等应用。

温存储:有较高性能IOPS、带宽要求,性能峰值不稳定。可使用主流SSD/HDD,适合OLAP、AI训练、传统企业应用。

冷存储:数据量大,有高容量需要,需要多次读取。可使用大容量企业级HDD,适合存储备份、在线交易。

极冷存储:需要大块写入,写入次数少。可使用SMR HDD,适合金融、医疗、广电行业数据长期归档。

刘钢告诉记者,现在很多企业还在采用12TB和14TB容量的硬盘,不过数据中心可使用的最大容量硬盘已经达到18TB和20TB。与14TB硬盘相比,18TB硬盘在达到同样容量的时候,可以减少22%服务器部署,从而减少部署成本和运行成本,因此每TB功耗会降低21%。从整体上来说,结合部署成本和运营成本的降低,总体拥有成本(TCO)可降低17%。

正是因为看到这样的优势,今年以来很多大型数据中心都开始部署18TB硬盘,18TB硬盘正在成为主流。“事实上,很多互联网公司在去年底到今年初就切换成18TB硬盘了,这可以给传统行业提供一些经验参考。”

2108111259471289297084.png

西部数据公司副总裁兼中国区业务总经理刘钢

刘钢指出,传统行业可能还在寻找一个平均值,目前市场上的平均值集中到了8TB硬盘,其实是因为传统行业用户没有做好数据分层,如果做好数据分层,企业会发现大容量需要用16TB,小容量需要用4TB,而不能集中放到8TB硬盘中。”

对此,刘钢表示,西部数据会把与头部互联网企业数据中心合作的经验和体会,分享给更多的行业,如金融、电信、企业新建的数据中心等等。此外,西部数据也加强了和云服务商、软件开发商的合作,让他们针对行业软件在西部数据最新的存储技术和设备上进行优化,这样他们可以把这部分技术和解决方案带到更多传统行业里去,而这些行业用户也会主动向互联网公司学习。

化解声波振动引发的性能变化

“虽然从14TB硬盘迁移到18TB硬盘会给数据中心带来成本上的好处,但是不可否认也会带来一些挑战。”刘钢补充到,当磁盘本身碟片的密度变高时,碟片之间的距离更近,磁头与碟片距离也更近,这使硬盘这个机械设备更容易受到服务器内部的噪声、振动等外界干扰的影响,造成非常大的性能变化。而且,在一台服务器里的盘与盘密度变高时,服务器为了散热,需要加大风扇的功率、频率和速度,也加剧了对高密度、大容量硬盘的干扰。“所以我们需要从整个开放计算系统的角度来考虑它会带来什么样的影响。”

pYYBAGEUt8OAWSDAAAJmH17xsxk110.png

经过西部数据的实际检测,发现硬盘的振动或风扇的振动带来的性能影响并不如其中的噪音带来的影响,声波产生的声压对硬盘的影响更大,约占80%,而其他结构性振动的影响只占约20%。同时,每个盘位受到的影响也不一样。

“所以西部数据在开放计算项目中也会考虑如何监测声压的变化,及其对硬盘性能带来的影响,并设计了声学振动捕捉模块,把它放在每一个盘位里,可以准确地监测哪个部分的声压是什么样。测试会帮助改进整体设计的空气流,在机箱里的流动线路。还可以改变风扇的设计来降低声压,测出大风扇或多个小风扇、风扇的位置是前中后,对于盘位的影响是什么样,会有什么样的空气流动。根据声压带来的影响再改善整个系统。”刘钢解释到。目前西部数据已经与浪潮等行业伙伴展开这方面的合作。

另一方面,西部数据还和浪潮联合推出了分布式存储解决方案,包括西部数据Ultrastar DC HC550 18TB硬盘和浪潮英信服务器NF5466M5,部署快速、运维方便,同时有助于减少分布式存储相关异常情况造成的损失,可大幅提升营业收入。

腾讯推出了分布式存储服务腾讯COS,它没有目录层次结构和数据格式限制,可以容纳海量数据。这是一款结合西部数据16T/18T HDD企业级硬盘、针对腾讯应用场景进行了优化的高密度存储服务器,该系统实现了存储桶空间的无容量上限扩展,能满足各种场景的需求。

分区存储满足计算效率

除了大数据、高密度存储,开放计算面对的挑战还有快速、高性能的计算,需要用到快数据。刘钢补充道,其中一部分是用高性能的SSD(如Ultrastar DC SN840 NVMe SSD)去满足极热数据的需求,另一部分是用主流的SSD(如Ultrastar DC SN640 NVMe SSD)去满足热数据、温数据的需求。

今天的SSD密度越来越高,容量越来越大,其中很重要的原因就是Flash技术的发展,要做好SSD,首先要有大规模的Flash生产和供应能力,才能在SSD不同的供应周期都能满足供应。

据介绍,西部数据和合作伙伴铠侠共同拥有全世界34.9%的Flash产能,同时,西部数据也构建了全球领先的千兆晶圆厂。这给西部数据带来了规模优势,让其可以投入最新的闪存技术。

pYYBAGEUt8WAFwKJAAJn2VS2rqA470.png

如西部数据发布的第六代3D闪存技术,大幅度提高了密度,不只是层数的堆叠,还包括每一层的密度提升——横向密度提高了10%,比上一代比特密度提高了70%,极大降低了成本,同时也提高了性能。

此外,要做好SSD还需要拥有自己的控制器和固件,提供纵向一体化的极致优化,才能做到持续的高性能。西部数据SSD集成了完全自主的NAND Flash、SSD控制器和固件于一体,有利于性能和稳定性的提升优化。

据悉,为了保证存储技术的先进性,西部数据很早就收购了闪迪公司。目前,西部数据不仅有专门的闪存业务部和硬盘业务部,还有战略技术部,来对未来的新技术进行前瞻性的研发投入,并经常与头部互联网客户交流,收集用户反馈,让研发技术能够与市场需求保持一致。

分解式架构可开放可组合

众所周知,传统的服务器里通常有CPUGPU、内存、硬盘、SSD、网络设备,但这种架构方式可能无法让宝贵的存储资源得到充分利用,运营成本也十分昂贵。

poYBAGEUt8iAU6wIAAK47Mqbz1I331.png

“未来的架构将会被分解,关键的资源不会依赖于某一台设备,也不会只被一台设备访问,它会被高速的网络连接,进行资源池化和共享。这就是开放式可组合的分解式架构,也是未来开放计算硬件的一个趋势。”刘钢表示。

其中存储资源也可以分解出来,让服务器集群共享。如西部数据推出的NVMe-oF-Fabric设备,能支持24个高性能的固态盘,被服务器集群使用,相当于每台服务器里都有快速的固态盘,能够提供快数据的访问,这样既能做到设备之间的数据共享,也能够降低成本。

poYBAGEUt8qAbRmFAAM6bufqM2w068.png

在刘钢看来,开放计算能够带来更多的创新,鼓励更多的开放互联,最终用户可以不必局限于某一个或某一类供应商,而是能够开放地在整个平台上去选择最优的设备,提高了透明度。

“因为开放架构不再是神秘的黑盒子,用户可以看到每个部分的关键部件是什么样,如何互联,有哪些优势。作为核心部件提供商,西部数据也愿意给用户提供更多的选择。”

全线存储解决方案支持开放计算扩展

事实上,今天的开放计算已经不局限于数据中心,已经扩展到了云端、终端和边缘等部分,而西部数据可以提供完整的从芯片到系统的云-边-端的全线数据存储解决方案,应用场景包括从手机、相机、无人机,到电脑、笔记本、IoT设备,再到数据中心的高密度硬盘、SSD和平台的JBOD、JBOF等解决方案。

pYYBAGEUt8yATGHUAAQcUk-GHHU315.png

刘钢强调:“西部数据是一家在数据存储解决方案上能同时提供大容量、高密度的硬盘以及快速、低功耗的闪存固态盘的公司。随着开放计算扩展到数据中心以外的更多的地方,西部数据的存储产品和解决方案也会相应的支持和配合开放计算的发展。”

fqj

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 存储
    +关注

    关注

    13

    文章

    4936

    浏览量

    90399
  • 西部数据
    +关注

    关注

    5

    文章

    547

    浏览量

    48397
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    西部数据发布业界首款后量子加密硬盘,为AI时代数据安全筑起量子韧性防线

    作为全球数据存储领域的领军企业,西部数据(Western Digital)近日正式宣布,其最新推出的大容量Ultrastar™ UltraSMR机械硬盘已成功集成后量子加密(Post-Quantum
    的头像 发表于 05-26 09:28 490次阅读

    西部数据加速存储创新,打造面向AI时代的定制化存储解决方案

    5月21日,作为 AI 驱动型数据经济的存储基石,西部数据(NASDAQ: WDC)于2026年5月21日在深圳举办客户创新日。活动期间,西部数据
    的头像 发表于 05-22 16:08 4149次阅读
    <b class='flag-5'>西部数据</b>加速<b class='flag-5'>存储</b><b class='flag-5'>创新</b>,打造面向AI时代的定制化<b class='flag-5'>存储</b>解决方案

    西部数据推出业界首款后量子加密硬盘,助力下一代可信基础架构及守护未来AI安全

    西部数据(纳斯达克股票代码:WDC)今日宣布,其最新的大容量 Ultrastar™ UltraSMR 机械硬盘(HDD)已集成后量子加密(Post-Quantum Cryptography, PQC)技术
    的头像 发表于 05-20 15:03 1133次阅读

    西部数据WD最新HDD技术路线曝光!40TB容量新高,100TB HDD指日可待

    % 的收入由 AI 和云计算驱动。作为一家独立的HDD企业,展现出强大的执行力和财务表现。     在2026年创新日(Innovation Day)上,西部数据发布100TB+ HDD路线图、性能与功耗优化的硬盘的技术突破,以
    的头像 发表于 02-06 10:51 2957次阅读
    <b class='flag-5'>西部数据</b>WD最新HDD技术路线曝光!40TB容量新高,100TB HDD指日可待

    西部数据加速 AI 时代存储创新

    Western Digital现更名为 WD,并发布 100TB+ HDD 路线图、性能与功耗优化的硬盘技术突破,以及重新定义存储经济效益和客户价值实现速度的智能平台解决方案   核心亮点
    的头像 发表于 02-04 15:11 338次阅读
    <b class='flag-5'>西部数据</b>加速 AI 时代<b class='flag-5'>存储</b><b class='flag-5'>创新</b>

    西部数据2026年展望:AI时代构建面向未来的存储

    的技术创新,和以AI数据中心、具身智能、新能源汽车、工业智能、卫星通信、AI眼镜等为代表的新兴应用,开启新一轮的技术和应用革命。过去的一年,半导体助力夯实数字经济高质量发展的全新底座,新的一年,半导体行业又将如何推动端云协同、普惠
    的头像 发表于 12-23 09:30 5126次阅读
    <b class='flag-5'>西部数据</b>2026年展望:AI时代构建面向未来的<b class='flag-5'>存储</b>

    3年10亿,携手攻坚:“AI计算开放架构联合实验室”协同创新计划正式启动

    在刚刚结束的光合组织2025人工智能创新大会(HAIC2025)上,一项项助力中国AI产业发展、推动产业底层协同等的关键举措逐一发布,包括30余家生态企业联合发起的“AI计算开放架构联合实验室”首批
    发表于 12-21 16:15 2499次阅读
    3年10亿,携手攻坚:“AI<b class='flag-5'>计算</b><b class='flag-5'>开放</b>架构联合实验室”协同<b class='flag-5'>创新</b>计划正式启动

    西部数据扩建系统集成测试实验室,以加速客户在持续增长的 AI 和云时代取得成功

    西部数据(NASDAQ: WDC)近日宣布正式启用其扩建的系统集成测试 (SIT)实验室。这座先进的设施占地 25,600 平方英尺,旨在加速客户成功并加快价值落地。随着 AI 应用驱动存储需求的大幅增长,新实验室将聚焦满足客户的关键需求——对
    的头像 发表于 10-22 16:05 1648次阅读
    <b class='flag-5'>西部数据</b>扩建系统集成测试实验室,以加速客户在持续增长的 AI 和云时代取得成功

    Arm获任开放计算项目董事会成员

    Arm 在推动行业开放与制定行业标准方面的独特技术领导力,助力塑造人工智能 (AI) 数据中心的未来格局。作为 OCP 董事会成员,Arm 将携手 Meta、Google、英特尔、微软等计算领域的领先企业,共同推进 AI
    的头像 发表于 10-18 14:49 1824次阅读

    曙光存储支持西湖大学高性能计算中心部署完成全新存储系统

    近日,曙光存储支持西湖大学高性能计算中心部署完成全新存储系统,为AI研发、科学计算和信息化平台等提供存力
    的头像 发表于 08-25 11:48 1562次阅读

    东芝硬盘荣获开放计算最佳创新

    日前,由全球最大的开放计算社区OCP主办的2025开放计算技术大会在北京举行,该会议是开放计算
    的头像 发表于 08-19 16:49 2423次阅读

    广汽集团如何打赢服务体验

    站在汽车产业变革与用户价值重构的十字路口,广汽集团锚定“再造新广汽”的目标,在深度理解用户需求、提供情绪价值的基础上,以用户需求为导向打响“三大战役”——用户需求战、产品价值、服务体验。其中,在
    的头像 发表于 08-14 16:36 1447次阅读

    村田中国亮相2025开放计算创新技术大会:以创新技术驱动智能化发展

    ”的主题,重点展示了包括电源、电感、传感器以及崭新集成封装解决方案在内的多款产品。今年,村田的创新技术与产品再次获得OCP的认可,荣获“开放计算最佳创新奖”,村田将始终致力于为
    的头像 发表于 08-07 16:09 976次阅读
    村田中国亮相2025<b class='flag-5'>开放</b><b class='flag-5'>计算</b><b class='flag-5'>创新</b>技术大会:以<b class='flag-5'>创新</b>技术驱动智能化发展

    西部数据通过 MLPerfâ Storage V2 测试结果,验证其真实场景下的AI存储性能

    西部数据 OpenFlex™ Data24 4000 系列 NVMe-oFä 存储平台,基于铠侠 CM7-V 系列 NVMe® 固态硬盘与配置 PEAK:AIO 软件的AI智算服务器,展现出卓越
    发表于 08-05 18:15 1138次阅读

    是德科技邀您相约2025开放计算创新技术大会

    2025开放计算创新技术大会将于8月7日在北京国际饭店举办,围绕“开放变革”主题,分享开放计算
    的头像 发表于 08-01 16:41 1685次阅读