0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

HCP的功能采用性能优化可更好地支持新一代非结构化数据工作负载

lhl545545 来源:DOIT 作者:DOIT 2020-09-10 11:00 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

这里的“对象”指的是对象存储,互联网、云服务商应用比较广泛,行业企业用户相对陌生,行业用户普遍习惯使用NAS而不是对象存储。

与NAS相比,对象存储给人的印象应该是便宜,这在海量数据爆炸式增长的今天,对象存储的优势让人心动。但是也并没有想象中的“婚姻”美满,因为行业企业应用习惯架构在NAS平台上,对接对象存储就需要做出改变,这并不容易。

对于行业企业用户来说,NAS也并非长久之计。随着数据积累以及数据爆炸式增长,NAS存储和管理的文件数量指数级增长,当达到一定规模时,如上亿或者几十亿文件,就会出现性能断崖式下跌,因为NAS机头处理能力会成为瓶颈。

有没有更好的解决方案呢?

NAS/对象搭配 干活不累

分布式NAS是最容易想到的方案,但是技术比较复杂,成本也比较高。

Hitachi公司旗下数字基础架构和解决方案公司Hitachi Vantara,以HCP产品为核心,与分布式NAS领先厂商WekaIO(Weka)合作,对外提交端到端DFS和对象存储解决方案,提供了解决问题的新思路。

新的解决方案对数据进行冷热分层,热数据保存在全闪存高性能存储节点,温冷数据可以保存在S11、S31等大容量对象存储节点,实现数据在不同性能的节点间自由流动。数据以对象的方式保存,享有对象存储的价格优势,对于上层应用,可以通过WekaIO(Weka)支持NAS应用。

与市场上常见的对象存储方案相比,专业的HCP产品,容量密度更高,可以在4U机架空间内提供1.7PB存储容量。根据Hitachi Vantara提供的数据,用HCP构建S3对象存储服务,I/O性能(吞吐量)可以提升3.4倍,成本可以降低34%,这还没有计算数据中心机架空间、电力、计算资源节省带来的效益。

Hitachi Vantara对外也支持纯软件方案,实现了软硬件的解耦。

Hitachi Vantara中国区首席技术官吴卫平指出:Hitachi Vantara与Weka的全球OEM合作将会以高性能、NVMe原生、并行的文件系统增强HitachiVantara的产品组合,这一文件系统将会与HCP对象存储紧密耦合。这种高性能的NAS解决方案能广泛适用于各行各业的人工智能机器学习和分析应用程序。

“HCP的此次功能扩展采用性能优化的全闪存HCP节点,可更好地支持新一代非结构化数据工作负载。这些增强的功能可帮助客户在Amazon Simple Storage Service协议上实现与以往相比3.4倍的吞吐率,并降低多达34%的成本。” 吴卫平说。

用对象支撑起新天地

对象存储的价值,也并不依赖分布式NAS。

如今是多云的时代,以AWS S3对象存储服务为代表,为用户提供多种选择已成为主流趋势。Hitachi Vantara HCP这样的专业存储解决方案可以用来构建对象存储平台,构建私有云对象存储,但这需要用户运维和管理私有云平台。

对象存储适用于数据备份、文件共享等应用场景。

以内部文件共享为例,企业可以构建类似云盘这样的服务。文件被保存在云盘,支持企业员工共享和移动办公。但从企业管理、合规需求来看,企业首先考虑的一是文件使用权限管理,二是数据的安全可靠,如防止黑客入侵、对数据进行篡改。与勒索病毒相比,这种数据篡改手段更加隐蔽、不易察觉,造成的影响和危害也更为巨大。

采用对象存储平台,借助哈希256算法,用户可以自行对数据进行加密保护。加密保护后的数据,可以防止篡改,同时因为没有办法进行二次加密,因而可以抵御勒索病毒的困扰。

吴卫平指出:很多用户希望采用S3等公有云服务。在这种情况下,用户可以考虑把元数据(索引数据)以及加密后的公钥存储在本地HCP,将海量数据保存在云平台。一来可以享用公有云平台的廉价,同时也不失去对于数据的管控。未来,当用户因为成本的原因,需要对数据进行迁移的时候,主动权完全掌握在用户自己的手里,不会完全受制于云服务商。

小结

从SAN到NAS再到对象存储,存储技术的创新是随数据规模的变化而不断发展的。各种形态的存储产品并不是简单的替代关系,每一次新的存储形态出现都是为了解决不断出现的新问题,就像NAS比SAN在技术上更适合文件的共享与存储,但并不会完全替代SAN;SAN仍然是数据库等结构化数据的首选,同时仍然可用于存储少量的文件类数据。

当用户的非结构化数据达到一定规模,或者文件数据达到一定量级的时候,对象存储需求将是自然而然的事情。男大当婚,女大当嫁,合理的人生目标和规划,将是幸福美满的保护神!

早日选择对象存储,防患于未然!
责任编辑:pj

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NAS
    NAS
    +关注

    关注

    11

    文章

    317

    浏览量

    114474
  • 数据备份
    +关注

    关注

    0

    文章

    59

    浏览量

    12147
  • 云服务
    +关注

    关注

    0

    文章

    860

    浏览量

    40445
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    Nordic新一代NRF54高性能蓝牙, 赋能更多穿戴戒指行业客户产品

    nRF54L15芯片去开发智能戒指产品,其处理能力较上一代系统级芯片提升倍,处理效率提高三倍,使智能戒指能够整合多款高性能传感器,提供精准健康洞察、早期预警及个性指导。 智能戒
    发表于 11-26 17:19

    结构化布线中使用电缆标签的4个主要优势

    带来诸多显著的优势。本文将深入探讨在结构化布线中使用电缆标签的4个主要优势,帮助读者更好地理解这细节的重要性。 提高布线系统的可管理性 清晰标识电缆用途 在复杂的布线系统中,各种电缆交织在
    的头像 发表于 11-24 10:34 172次阅读

    【内测活动同步开启】这么小?这么强?新一代大模型MCP开发板来啦!

    【内测活动同步开启】这么小?这么强?新一代大模型MCP开发板来啦! 聆思全新一代六合芯片「LS26系列」,搭载WIFI / BLE & BT / NPU,与「小聆AI」强强联合
    发表于 09-25 11:47

    NetApp助力对象存储现代,提升速度、扩展性和安全性

    智能数据基础设施公司NetApp® (NASDAQ: NTAP) 今天宣布推出NetApp StorageGRID® 12.0,这是扩展的软件定义对象存储解决方案,专为
    的头像 发表于 09-11 10:41 336次阅读

    智能体AI面临结构化数据难题:IBM推出解决方案

    ,同时提供个开放的混合数据基础架构和企业级的结构化结构化数据管理。 智能体AI面临
    的头像 发表于 07-02 09:40 395次阅读

    直流负载箱的主要功能有哪些?

    排放。通过节能环保功能,可以降低测试成本,提高测试效率。直流负载箱作为种重要的测试设备,具有模拟负载负载控制、故障模拟、保护
    发表于 06-17 13:34

    DDN携手NVIDIA释放结构化数据的AI价值

    DDN 通过与 NVIDIA AI 数据平台的合作,推出联合解决方案,简化了企业对结构化数据的存储、访问和激活方式,助力客户释放生成式 AI 的巨大商业潜能。DDN 全球合作伙伴负责
    的头像 发表于 06-10 10:31 792次阅读

    从零到:如何利用结构化数据中台快速部署AI解决方案

    ……这些“非标”数据量大、来源广、结构杂,却恰恰是驱动AI模型的关键燃料。   想要从零到,快速部署AI解决方案,个可行路径是——构建
    的头像 发表于 04-14 13:50 610次阅读

    新一代光纤涂覆机

    新一代光纤涂覆机系列:国产! 2025年,潍坊华纤光电科技将推出五大类全光纤涂覆机,标志着国产光纤涂覆机技术迈入水平。以下是该系列产品的详细介绍: 五大类光纤涂覆机 单套模组光纤涂覆机 特点:替代
    发表于 04-03 09:13

    AI知识库的搭建与应用:企业数字转型的关键步骤

    和应用数据,从而为AI应用提供源源不断的支持,帮助企业实现全面的数字转型。   AI知识库的定义与作用   AI知识库是个由结构化
    的头像 发表于 03-27 15:18 1092次阅读

    充电桩负载测试系统技术解析

    设备。本文将深入解析该系统的技术架构与核心功能、系统技术架构 现代充电桩负载测试系统采用模块设计,主要由功率
    发表于 03-05 16:21

    结构化数据中台:企业AI应用安全落地的核心引擎

    应用的规模落地。   作为国内领先的结构化数据中台服务商,够快云库通过全链路数据管理与安全赋能,为企业构建AI应用的“
    的头像 发表于 02-27 17:06 855次阅读

    如何通过直流负载优化电源测试效率?

    以下是通过直流负载优化电源测试效率的方法: 精准模拟负载 多样负载模拟:直流负载
    发表于 02-13 13:45

    Supermicro高性能服务器量产供货,优化多重工作负载

    应对计算需求严苛的高性能工作负载而设计。无论是大规模AI应用、集群规模的高性能计算,还是需要大量GPU支持的协作设计、媒体传播等场景,这些服
    的头像 发表于 01-21 11:00 771次阅读

    IBM Storage - 支持AI应用场景的数据存储软硬件解决方案

    为了解决数据工作负载在各地分散的现状,需要实现对存储在分布式文件和对象存储系统中的大量结构化数据
    的头像 发表于 12-30 15:00 859次阅读
    IBM Storage - <b class='flag-5'>支持</b>AI应用场景的<b class='flag-5'>数据</b>存储软硬件解决方案