0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

HCP的功能采用性能优化可更好地支持新一代非结构化数据工作负载

lhl545545 来源:DOIT 作者:DOIT 2020-09-10 11:00 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

这里的“对象”指的是对象存储,互联网、云服务商应用比较广泛,行业企业用户相对陌生,行业用户普遍习惯使用NAS而不是对象存储。

与NAS相比,对象存储给人的印象应该是便宜,这在海量数据爆炸式增长的今天,对象存储的优势让人心动。但是也并没有想象中的“婚姻”美满,因为行业企业应用习惯架构在NAS平台上,对接对象存储就需要做出改变,这并不容易。

对于行业企业用户来说,NAS也并非长久之计。随着数据积累以及数据爆炸式增长,NAS存储和管理的文件数量指数级增长,当达到一定规模时,如上亿或者几十亿文件,就会出现性能断崖式下跌,因为NAS机头处理能力会成为瓶颈。

有没有更好的解决方案呢?

NAS/对象搭配 干活不累

分布式NAS是最容易想到的方案,但是技术比较复杂,成本也比较高。

Hitachi公司旗下数字基础架构和解决方案公司Hitachi Vantara,以HCP产品为核心,与分布式NAS领先厂商WekaIO(Weka)合作,对外提交端到端DFS和对象存储解决方案,提供了解决问题的新思路。

新的解决方案对数据进行冷热分层,热数据保存在全闪存高性能存储节点,温冷数据可以保存在S11、S31等大容量对象存储节点,实现数据在不同性能的节点间自由流动。数据以对象的方式保存,享有对象存储的价格优势,对于上层应用,可以通过WekaIO(Weka)支持NAS应用。

与市场上常见的对象存储方案相比,专业的HCP产品,容量密度更高,可以在4U机架空间内提供1.7PB存储容量。根据Hitachi Vantara提供的数据,用HCP构建S3对象存储服务,I/O性能(吞吐量)可以提升3.4倍,成本可以降低34%,这还没有计算数据中心机架空间、电力、计算资源节省带来的效益。

Hitachi Vantara对外也支持纯软件方案,实现了软硬件的解耦。

Hitachi Vantara中国区首席技术官吴卫平指出:Hitachi Vantara与Weka的全球OEM合作将会以高性能、NVMe原生、并行的文件系统增强HitachiVantara的产品组合,这一文件系统将会与HCP对象存储紧密耦合。这种高性能的NAS解决方案能广泛适用于各行各业的人工智能机器学习和分析应用程序。

“HCP的此次功能扩展采用性能优化的全闪存HCP节点,可更好地支持新一代非结构化数据工作负载。这些增强的功能可帮助客户在Amazon Simple Storage Service协议上实现与以往相比3.4倍的吞吐率,并降低多达34%的成本。” 吴卫平说。

用对象支撑起新天地

对象存储的价值,也并不依赖分布式NAS。

如今是多云的时代,以AWS S3对象存储服务为代表,为用户提供多种选择已成为主流趋势。Hitachi Vantara HCP这样的专业存储解决方案可以用来构建对象存储平台,构建私有云对象存储,但这需要用户运维和管理私有云平台。

对象存储适用于数据备份、文件共享等应用场景。

以内部文件共享为例,企业可以构建类似云盘这样的服务。文件被保存在云盘,支持企业员工共享和移动办公。但从企业管理、合规需求来看,企业首先考虑的一是文件使用权限管理,二是数据的安全可靠,如防止黑客入侵、对数据进行篡改。与勒索病毒相比,这种数据篡改手段更加隐蔽、不易察觉,造成的影响和危害也更为巨大。

采用对象存储平台,借助哈希256算法,用户可以自行对数据进行加密保护。加密保护后的数据,可以防止篡改,同时因为没有办法进行二次加密,因而可以抵御勒索病毒的困扰。

吴卫平指出:很多用户希望采用S3等公有云服务。在这种情况下,用户可以考虑把元数据(索引数据)以及加密后的公钥存储在本地HCP,将海量数据保存在云平台。一来可以享用公有云平台的廉价,同时也不失去对于数据的管控。未来,当用户因为成本的原因,需要对数据进行迁移的时候,主动权完全掌握在用户自己的手里,不会完全受制于云服务商。

小结

从SAN到NAS再到对象存储,存储技术的创新是随数据规模的变化而不断发展的。各种形态的存储产品并不是简单的替代关系,每一次新的存储形态出现都是为了解决不断出现的新问题,就像NAS比SAN在技术上更适合文件的共享与存储,但并不会完全替代SAN;SAN仍然是数据库等结构化数据的首选,同时仍然可用于存储少量的文件类数据。

当用户的非结构化数据达到一定规模,或者文件数据达到一定量级的时候,对象存储需求将是自然而然的事情。男大当婚,女大当嫁,合理的人生目标和规划,将是幸福美满的保护神!

早日选择对象存储,防患于未然!
责任编辑:pj

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NAS
    NAS
    +关注

    关注

    11

    文章

    325

    浏览量

    115157
  • 数据备份
    +关注

    关注

    0

    文章

    59

    浏览量

    12200
  • 云服务
    +关注

    关注

    0

    文章

    861

    浏览量

    41075
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    告别高成本!新一代极简光端机,性能对标,价格直降近50%

    互联网领域,企业均迫切需要款兼顾严苛传输需求、成本控制与简易部署的光端机解决方案。 、传统光端机方案陷入两难 新一代光端机极简方案顺势而生,以架构革新打破行业困境,实现高性能
    发表于 04-23 10:09

    汇顶科技正式推出全新一代柔性OLED触摸屏控制芯片GT9926

    4月1日,汇顶科技正式推出全新一代柔性OLED触摸屏控制芯片GT9926,并率先商用于OPPO K15 Pro+游戏手机。该芯片面向新一代轻薄、高性能OLED柔性屏幕设计,针对高
    的头像 发表于 04-02 15:33 2422次阅读

    Altair OptiStruct:重构结构研发逻辑,引领工业仿真与优化新纪元

    在工业制造向高端、轻量化、智能全速转型的当下,产品结构研发早已告别“经验设计+反复试制”的传统模式,转而依托精准仿真与智能优化技术,实现性能
    发表于 03-20 10:25

    NVIDIA cuDF和cuVS获全球领先数据平台采用

    企业每年产生数百 ZB (Zettabyte) 的数据,并在争相将这些信息转化为洞察。NVIDIA cuDF 和 cuVS 作为基于 NVIDIA CUDA-X 构建的加速数据库,正在被各行业的数据平台所应用,带来至高 5 倍
    的头像 发表于 03-19 15:46 433次阅读

    物联网数据中台的功能应用有哪些

    源,包括数据库、文件系统、云存储、物联网设备、社交媒体等,将分散在不同系统中的结构化、半结构化结构化
    的头像 发表于 02-26 14:35 218次阅读

    Nordic新一代NRF54高性能蓝牙, 赋能更多穿戴戒指行业客户产品

    nRF54L15芯片去开发智能戒指产品,其处理能力较上一代系统级芯片提升倍,处理效率提高三倍,使智能戒指能够整合多款高性能传感器,提供精准健康洞察、早期预警及个性指导。 智能戒
    发表于 11-26 17:19

    结构化布线中使用电缆标签的4个主要优势

    带来诸多显著的优势。本文将深入探讨在结构化布线中使用电缆标签的4个主要优势,帮助读者更好地理解这细节的重要性。 提高布线系统的可管理性 清晰标识电缆用途 在复杂的布线系统中,各种电缆交织在
    的头像 发表于 11-24 10:34 415次阅读

    【内测活动同步开启】这么小?这么强?新一代大模型MCP开发板来啦!

    【内测活动同步开启】这么小?这么强?新一代大模型MCP开发板来啦! 聆思全新一代六合芯片「LS26系列」,搭载WIFI / BLE & BT / NPU,与「小聆AI」强强联合
    发表于 09-25 11:47

    NetApp助力对象存储现代,提升速度、扩展性和安全性

    智能数据基础设施公司NetApp® (NASDAQ: NTAP) 今天宣布推出NetApp StorageGRID® 12.0,这是扩展的软件定义对象存储解决方案,专为
    的头像 发表于 09-11 10:41 669次阅读

    比 502 更好用?新一代瞬间胶有哪些升级?

    新一代瞬间胶在配方设计、性能表现和应用场景上实现了全面升级,显著提升了实用性和可靠性。、配方革新:从单固化到精准调控新一代瞬间胶通过分
    的头像 发表于 07-21 10:28 1420次阅读
    比 502 <b class='flag-5'>更好</b>用?<b class='flag-5'>新一代</b>瞬间胶有哪些升级?

    新一代高效电机技术—PCB电机

    纯分享帖,点击下方附件免费获取完整资料~~~ *附件:新一代高效电机技术—PCB电机.pdf 内容有帮助可以关注、点赞、评论支持下,谢谢! 【免责声明】本文系网络转载,版权归原作者所有。本文所用视频、图片、文字如涉及作品版权
    发表于 07-17 14:35

    智能体AI面临结构化数据难题:IBM推出解决方案

    ,同时提供个开放的混合数据基础架构和企业级的结构化结构化数据管理。 智能体AI面临
    的头像 发表于 07-02 09:40 668次阅读

    直流负载箱的主要功能有哪些?

    排放。通过节能环保功能,可以降低测试成本,提高测试效率。直流负载箱作为种重要的测试设备,具有模拟负载负载控制、故障模拟、保护
    发表于 06-17 13:34

    DDN携手NVIDIA释放结构化数据的AI价值

    DDN 通过与 NVIDIA AI 数据平台的合作,推出联合解决方案,简化了企业对结构化数据的存储、访问和激活方式,助力客户释放生成式 AI 的巨大商业潜能。DDN 全球合作伙伴负责
    的头像 发表于 06-10 10:31 1068次阅读

    恒流恒压直流充电测试负载设计:构建精准检测体系

    ,传统电阻负载存在的调节迟滞、能量浪费等问题亟待突破,智能可编程测试负载成为行业升级的关键突破口。 、测试负载
    发表于 04-29 14:18