0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

2021年12种最佳分布式文件系统和对象存储平台榜单

存储加速器 来源:存储社区 作者:存储社区 2021-01-27 16:06 次阅读

分布式文件系统存储利用单个并行文件系统将多个存储节点集群在一起。该系统提供一个名称空间和一个存储池,以并行提供多个主机的高带宽数据访问。然后,将数据分布在集群中的节点上,以提供数据可用性和弹性,并以线性方式扩展容量和吞吐量。相反,对象存储是指将数据存储在称为“对象”的结构中的系统和软件。这些工具通过RESTful HTTP API为用户数据提供服务,这些API实际上已经成为访问对象存储的标准。

尽管它们是单独的存储方法,但是分布式文件系统和对象存储市场正在稳步合并。分布式文件系统和对象存储平台是基于分布式设计的软件和硬件。这些解决方案支持对象和或横向扩展文件技术,以解决因非结构化数据增长而导致的业务需求。这些平台的市场是基于分布式计算体系结构的,在该体系结构中,系统中没有单点故障或争用。为了更好地说明问题,解决方案必须具有完全分布式的体系结构,其中数据和元数据可以通过网络跨集群中的多个节点进行复制,分布或擦除编码。

选择最佳的分布式文件系统和对象存储平台来使用可能是一项艰巨的任务,可以参考以下12种最佳分布式文件系统和对象存储平台的清单,以考虑是否要寻找相关的解决方案。

Caringo

Caringo Inc.提供基于对象的技术,用于访问,存储和分发非结构化或基于文件的数据。它的 旗舰产品 Caringo Swarm提供了私有云存储, 使用户能够部署存储集群而不会被专有硬件锁定。该提供商提供了可扩展的SDS解决方案,该解决方案具有对传统文件数据,对象存储API和公共云数据的通用支持。Caringo的存储平台可在私有,公共和混合云环境中提供。用户还可以在x86硬件的任何组合上进行内部扩展。Caringo是第一代对象存储供应商之一,并且提供对象解决方案已有13年以上。

Cloudian

Cloudian 是对象存储系统的独立提供商,提供S3兼容性以及合作伙伴生态系统。供应商的旗舰解决方案 HyperStore是为高吞吐量对象存储工作负载而设计的横向扩展对象平台。它在数据中心内提供了可伸缩性,灵活性和经济性。HyperStore还提供了一个附加文件网关来管理文件工作负载。此外,Cloudian的数据结构体系结构使企业可以跨站点存储,查找和保护对象和文件数据。这些过程可以在一个统一的平台内的本地和公共云中进行。

DDN

DataDirect Networks,也称为DDN,是可伸缩存储和处理解决方案以及专业服务的提供商。组织可以使用各种DDN存储平台来大规模捕获,存储,处理,分析,协作和分发数据,信息和内容。DDN的解决方案EXAScaler是在本地和云中运行的分布式文件系统。EXAScaler的目标是大规模,高吞吐量的文件工作负载,而WOS(DDN的辅助平台)被定位为长期存储库和EXAScaler的层。供应商为金融服务公司,医疗保健组织,能源公司,政府机构和云服务提供商提供服务。

Hitachi Vantara

Hitachi Vantara 协助企业存储,扩充,激活和货币化其数据。该提供程序在对象存储的保护下提供了四种解决方案,分别是Hitachi Content Platform(HCP),HCP Anywhere,Hitachi Data Ingestor (HDI)和Hitachi Content Intelligence。每个都提供对象存储, 文件同步,共享, 最终用户数据保护;云文件网关;以及搜索和分析见解。HCP产品组合是用于数据管理和分析的广泛战略计划的组成部分,并提供了一个涵盖一系列垂直领域和解决方案领域的生态系统。卖方完全是–是Hitachi,Ltd.的子公司,还提供备份和灾难恢复解决方案。

华为

华为技术有限公司是一家电信解决方案提供商,提供具有有线,无线和IP技术的基础架构应用软件和设备 。在存储方面, 华为提供全闪存,混合闪存,云存储,超融合基础架构(HCI)和数据管理。供应商提供OceanStor 9000 V5作为文件系统平台,并提供OceanStor 100D(以前为FusionStorage)作为块和对象存储解决方案。OceanStor 100D非常适合私有云,归档和内容分发,而OceanStor 9000通常用于视频监视,富媒体分发和商业高性能计算(HPC)。未来几年,华为将把OceanStor 100D定位为其旗舰解决方案,以满足所有非结构化数据需求。

IBM

IBM提供各种技术和咨询服务,包括预测分析和软件开发。该提供商提供了一系列存储选项,包括闪存,软件定义存储(SDS),数据保护软件,混合存储阵列,存储区域网络(SAN)和磁带存储。IBM Spectrum Scale是供应商的文件系统产品,可在本地和公共云中运行。其对象存储产品Cloud Object Storage(COS)也可以在本地和IBM Cloud中运行。建议将Spectrum Scale用于商业HPC和分析,而COS更适合归档和私有云存储。Spectrum Scale支持OpenShift容器,IBM COS最近添加了更高性能的设备以及经过认证的新型第三方服务器。

浪潮

浪潮提供大数据服务,云数据中心,云服务和智能企业。提供商的浪潮AS13000G5系列平台为文件和对象存储提供了统一的软件解决方案。浪潮为PB级应用提供了三种AS13000G5产品,用于高清视频,高性能,高可靠性和基于云的部署。该供应商的存储平台非常适合商业HPC,备份和归档,分析以及混合云。虽然 浪潮提供了很多的服务,但其存储业务是公司中仅次于服务器业务的第二大业务。

NetApp

尽管NetApp主要提供本地存储基础架构,但该提供商还专注于混合云数据服务,该服务可促进跨云和本地环境管理应用程序和数据。供应商的对象存储解决方案StorageGRID是一个可用作软件和硬件设备的平台,可以在公共云和本地运行。NetApp还支持从本地StorageGRID到公共云服务AWS和Azure的数据分层。此外,提供商还可以在接收时提供信息生命周期管理(ILM),将每个节点的容量增加到2.8PB和10亿个对象,提供主动高可用性负载平衡软件以及多因素身份验证。

Pure Storage

Pure Storage是一家全闪存企业存储提供商,可在数据中心中广泛部署闪存。FlashBlade是提供商专用的统一文件和对象产品。Pure Storage提供了一个横向扩展的分布式文件系统,该系统可以通过添加刀片来扩展容量和性能来处理数百亿个文件和对象,以实现最大的吞吐量和并行度。此外,供应商还支持将其扩展到150个刀片,并为其Purity // FB软件提供复制和文件系统回滚。Pure Storage还使用户能够采用下一代技术,包括人工智能机器学习,以最大化其数据价值。2020年,Pure Storage以3.7亿美元收购了 Portworx 。

Qumulo

Qumulo是一家企业数据存储提供商,其解决方案可在 Qumulo存储服务器上,Dell和HPE等公司的硬件上以及本机在公共云中使用。Qumulo File System是一种软件定义的解决方案,可在本地和公共云中运行。该平台专为具有容量管理和性能分析的大规模,高吞吐量文件工作负载而设计。Qumulo还提供了混合硬件节点和增强的SMBv3支持,以及将文件从Qumulo群集复制到AWS S3的功能。此外,提供商还提供了AWS Marketplace上可用的软件,第三方硬件以及Qumulo 直接出售给客户的标准硬件 。

RedHat

红帽公司是向企业社区提供开源软件产品的软件提供商。红帽提供红帽 Ceph存储和Gluster存储。Ceph Storage支持块,对象和文件存储访问,而Gluster Storage是文件产品。Ceph Storage还支持Red Hat OpenShift容器存储(OCS)和Red Hat Cloud的超融合基础架构的基础存储。建议将Ceph用于内容交付和混合云,而Gluster适用于备份,归档,主目录和富媒体。该提供商提供了一个多云网关,自动化,后端存储和安装实用程序。

Scality

Scality 是一家由风险投资支持的软件提供商,可提供大规模的存储管理和基础架构解决方案。该供应商的旗舰解决方案RING提供了用于大容量非结构化数据工作负载的集成文件和对象存储,可在商品硬件上作为软件运行,并使x86服务器可扩展至数百PB和数十亿个对象。此外,RING具有端到端并行架构和获得专利的对象存储核心,可提高可用性和耐用性。该平台通过标准存储协议(例如NFS,S3,OpenStack Swift和Cinder)与应用程序集成 。Scality通过其集成的文件和对象体系结构与其他供应商区分开来。

责任编辑:xj

原文标题:2021年12种最佳分布式文件系统和对象存储平台

文章出处:【微信公众号:存储社区】欢迎添加关注!文章转载请注明出处。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • API
    API
    +关注

    关注

    2

    文章

    1380

    浏览量

    60983
  • 对象存储
    +关注

    关注

    0

    文章

    65

    浏览量

    11896
  • 分布式系统
    +关注

    关注

    0

    文章

    140

    浏览量

    19096

原文标题:2021年12种最佳分布式文件系统和对象存储平台

文章出处:【微信号:TopStorage,微信公众号:存储加速器】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    鸿蒙原生应用开发——分布式数据对象

    01、什么是分布式数据对象 在可信组网环境下,多个相互组网认证的设备将各自创建的对象加入同一个 sessionId,使得加入的多个数据对象之间可以同步数据,也就是说,当某一数据
    发表于 12-08 10:01

    分布式系统硬件资源池原理和接入实践

    /distributed_hardware_components_cfg.json 三个接口的 so 实现后,编译打包到系统库路径下,同时配置到分布式硬件部件配置文件中,设备组网上线后,可以看到
    发表于 12-06 10:02

    redis分布式锁的应用场景有哪些

    系统中,多个节点可能同时访问共享资源,例如数据库、文件系统等。使用Redis分布式锁可以保证在同一时刻只有一个节点能够访问该资源,避免了并发冲突问题,确保数据的一致性。 分布式任务调度
    的头像 发表于 12-04 11:21 540次阅读

    zookeeper分布式原理

    是提供一个高可用的、一致性的机制,用于解决分布式系统中常见的一致性问题,比如Leader选举、分布式锁等。在本文中,我们将详细介绍Zookeeper的原理和工作机制。 数据模型 Zookeeper的数据模型是一个类似于
    的头像 发表于 12-03 16:33 366次阅读

    HarmonyOS分布式文件系统开发指导

    分布式文件系统概述 分布式文件系统(hmdfs,HarmonyOS Distributed File System)提供跨设备的文件访问能力
    发表于 11-14 17:14

    Linux的文件系统特点

    Linux的文件系统特点 文件系统要有严格的组织形式,使得文件能够以块为单位进行存储文件系统中也要有索引区,用来方便查找一个
    的头像 发表于 11-09 14:48 457次阅读
    Linux的<b class='flag-5'>文件系统</b>特点

    分布式文件系统的设计原理是什么?

    什么是分布式文件系统分布式文件系统(DFS)是一种计算机文件系统,使用户能够从多个分布式位置
    的头像 发表于 10-17 17:35 410次阅读

    本地搭建FastDFS文件系统入门教程

    FastDFS是一个开源的轻量级分布式文件系统,它对文件进行管理,功能包括:文件存储文件同步、
    发表于 09-21 15:02 212次阅读
    本地搭建FastDFS<b class='flag-5'>文件系统</b>入门教程

    基于ZigBee的分布式井盖监控系统

    随着我国现代经济发展水平的不断提高,城市井盖数目逐渐增加。由于较多井盖被盗,致使路面形成陷阱,危害到过往车辆和行人安全。本文提出了一基于 ZigBee无线网络的智能安全监控系统,解决分布式布控困难
    发表于 09-18 08:46

    谈谈什么是文件系统 文件系统的功能与特点

    文件系统的应用非常广泛,同时种类也是特别的多,并且不同平台也会使用不同性能和特点的文件系统,比如查找效率、数据安全等级等等,如下面windows使用的NTFS:
    发表于 08-30 09:50 1421次阅读
    谈谈什么是<b class='flag-5'>文件系统</b> <b class='flag-5'>文件系统</b>的功能与特点

    OpenHarmony 分布式硬件关键技术

    OpenHarmony技术峰会——生态与互联分论坛 ​ 正 文 内 容 OpenHarmony是一款面向未来万物互联场景的操作系统,其设计采用了分布式架构。那么OpenHarmony相比于传统操作系统
    发表于 08-24 17:25

    适用于Linux的最佳通用文件系统 Linux文件系统的安装

    为您的计算机选择正确的文件系统可能是一个困难的过程。您可能会想知道:为什么文件系统很重要?有没有适用于安装 Linux 的特定文件系统? 事实证明,有两种文件系统在安装 Linux 时
    发表于 08-03 10:22 190次阅读
    适用于Linux的<b class='flag-5'>最佳</b>通用<b class='flag-5'>文件系统</b> Linux<b class='flag-5'>文件系统</b>的安装

    分布式存储的7个特征

    什么是分布式存储呢?如果一个存储系统,不管是对象、块、文件、kv、log、olap、oltp,只要对所管理的数据做了Partitioning
    发表于 07-18 14:17 650次阅读

    分布式存储的分类和典型应用场景

    分布式对象存储:指各存储节点由标识符、数据和元数据的对象数据构成。其中标识符在该存储系统中唯一,
    发表于 06-12 14:38 2970次阅读
    <b class='flag-5'>分布式</b><b class='flag-5'>存储</b>的分类和典型应用场景

    如何使用分布式存储系统促进AI模型训练

    这凸显了分布式存储在人工智能(AI)领域的重要性。JuiceFS 是一个开源、高性能的分布式文件系统,为这个问题提供了解决方案。
    发表于 06-12 09:28 343次阅读
    如何使用<b class='flag-5'>分布式</b><b class='flag-5'>存储系统</b>促进AI模型训练