0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

兆芯+图云创智—可信分布式存储系统解决方案

jf_67464575 作者:jf_67464575 2025-04-23 10:29 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

方案简介
图云创智分布式存储系统采用全分布式设计与先进的存储虚拟化技术相结合,由多个独立的兆芯 x86 服务器作为存储节点,联合道熵存储软件和思赞博微可信计算技术实现统一资源调度、纵向横向无缝扩展、全场景应用与存储接口支持、自动化运维管理等技术手段以满足海量数据的存储需求。

产品架构
图云创智分布式存储系统主要由存储层、服务支撑层、接口层三层架构组成。图云创智分布式存储支持基于自研 CPU 架构和 X86 架构的异构部署,支持基于固态硬盘和机械硬盘创建存储池,支持异构存储的纳管与优化,图云创智分布式存储系统通过纳管大量的存储物理资源,构成一个或者多个分布式的虚拟化存储池,可提供高性能、高稳定、高安全的块存储、文件存储、对象存储等统一存储服务,并通过接口层为前端应用提供多样化的存储协议对接。

wKgZPGgIT2SATvGuAAGyL3Zmk-g865.png

技术路线
1.处理器:兆芯开胜KH-40000 系列
2.硬件:兆芯4U 机架式存储服务器、思赞博微可信计算模块
3.操作系统:centos7操作系统
4.基础软件:Firefox浏览器、MobaXtermssh软件
5.应用软件:道熵分布式存储管理软件V4.0

主要特点
1:采用全自主创新架构:支持兆芯等国内服务器平台,支持 UOS、麒麟等国内操作系统。采用全分布式冗余总体架构,实现整个存储系统可以无缝、无感地平衡扩容至上千个存储节点,支持 PB 级别,甚至数百 PB级别海量数据的高速存取,融合共享;
2:支持横向扩展和纵向扩展双扩展模式:既支持增加节点数来增加系统IOPS 性能和存储容量(横向扩展),同时支持在节点内通过增加JBOD扩展柜和磁盘来扩容(纵向扩展);
3:实现节点存储资源池化管理:将节点内所有磁盘整合为一个统一的存储池,数据均匀分布在所有磁盘上;具备节点内RAID 保护(RAID10、RAID5、RAID6模式)和节点间数据块复制的双重数据保护机制;支持N+M 纠删码跨节点数据保护机制;
4:具备在线数据完整性保护机制:即每个数据块都有相对应的256位数据校验码;数据在读出时,必须与校验码匹配后才交付前端应用;否则启动数据自修复机制,确保前端应用数据安全。支持多种不同等级的校验码:fletcher2,fletcher4,SHA-2
5:具备在线数据压缩功能:支持以下压缩编码:LZ4,LZJB,GZIP1-9
6:支持磁盘数据加密:包含 aes-xts-plain64,aes-cbc-essiv:sha256,Twofish,Serpent,6.cast5-RFC,2144,cast6-RFC,2612等加密模式;
7:支持缓存 SSD分层机制: 最热的数据,包含元数据,被自动分配在 DRAM 中,次热的数据,被分配在固态硬盘中。Cache内数据替换时,采用自适应工作负载方式动态调整MostRecent 数据和 Most Frequent数据所占比例;
8:支持容量超分配(瘦供给):分配给用户的容量可达到系统的裸存储容量的5倍或以上;当实际使用物理存储空间达到80%或以上,系统自动预警并提示用户及时扩容;
9:支持基于 Flash 写 log加速机制:即数据在写入后端存储池之前以 log的形式保存在 Flash中(SSD 或 NVMe),确保掉电安全;在数据写入后端存储池时,多个随机写IO请求组成群(group),依照顺序方式写入,提升整体写性能;
10:支持通过磁盘迁移的方式实现节点恢复:将某个受损节点的全部磁盘插入到某个备用节点,上电重启后该节点自动替换损害的节点,无需数据重新分布或迁移;
11:QOS 指标:支持针对应用创建具备不同 QoS 的存储池,通过限定 IOPS、带宽等参数,隔
绝不同应用之间对存储性能造成性能互扰;
12:按天自动产生运营报告:包括 CPU、内存、磁盘、IOPS、网络、使用情况及延迟、运维曲线等;并自动通过电子邮件发送:
13:存储异构:支持将外接存储与X86服务器一同划入虚拟资源池,共同用于虚拟服务器所产生的数据存储;
14:存储云平台:可对外部物理服务器/虚拟机提供多种存储协议支持,包括FC、iSCSI、NFS、SAMBA、Openstack Cinder、S3 RESTful 对象存储协议;支持 HDFS 协议 ;支持主流NoSql数据库直接在分布式存储中部署,包含MongoDB,Cassandra,和 Hadoop Hbase;
15:备份与远程容灾:支持整个集群存储中所有快设备的全备份和增量备份,可按小时/天/周月备份数据;具备数据加密,压缩,去重等高级功能;支持将数据备份到S3兼容存储及亚马逊/阿里云等共有云平台;支持集群与集群之间的同步/异步远程复制,可实现 RTO与RPO 同时趋于零的最高级别容灾功能。

客户收益
1.图云创智分布式存储提供多种存储服务,包含 FC、iSCS、块、对象、文件存储等,对传统关系型数据库、非结 构化海量数据、云计算、大数据等不同应用场景提供统一存储支撑。
2.图云创智 分布式存储具备极其强大的容灾抗毁能力。强一致性分布 式设计确保在断电、断网、服务器硬件故障、磁盘损坏等多种(甚至 极端)故障模式下,数据仍然能保持一致性。此外,图云创智分布式存储系统还具备完善的数据完整性保 护策略,以及 PB 级别的持续增量数据备份措施。
3.图云创智 分布式存储还具备极高的安全防护机制,建立了零信任框架,通过执行最小权限原则,防止恶意获取数据的发生。

应用场景
图云创智分布式存储系统方案适用于各种需要大规模、高性能数据存储的场景,如互联网公司、云计算平台、大数据分析、视频存储等。它可以满足非结构化数据(如文本、图片、音频等)和结构化数据(如数据库表)的存储需求,为用户提供高效、稳定的数据存储服务。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 分布式存储
    +关注

    关注

    4

    文章

    182

    浏览量

    20217
  • 兆芯
    +关注

    关注

    2

    文章

    309

    浏览量

    18547
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    2022全新版!Java分布式架构设计与开发实战(完结)

    2022全新版!Java分布式架构设计与开发实战(完结) 分库分表实战:Java海量数据存储架构设计 在现代互联网应用中,随着业务规模的指数级增长,数据库性能瓶颈已成为制约系统发展的关键因素。当单
    发表于 03-30 15:20

    分布式数据恢复—Ceph+TiDB数据恢复报告

    故障情况:客户设备为Ceph分布式存储系统,采用RBD(RADOS Block Device)作为块存储服务。Ceph集群由多个OSD(Object Storage Daemon)节点组成,数据通
    的头像 发表于 02-03 17:22 250次阅读
    <b class='flag-5'>分布式</b>数据恢复—Ceph+TiDB数据恢复报告

    国内分布式AI存储方案商港股IPO!

    解决方案,即AI数据湖存储与AI训推存储解决方案,实现AI存储在企业客户业务运营中的无缝部署及实施,解决企业在AI转型过程中的关键
    的头像 发表于 01-29 13:44 8882次阅读
    国内<b class='flag-5'>分布式</b>AI<b class='flag-5'>存储</b><b class='flag-5'>方案</b>商港股IPO!

    分布式能源管理物联网解决方案

    ,构建全链路能源数据采集与管控体系,实现分布式能源的精细化管理与智能化运维。 方案架构 终端设备层:现场设备包括光伏逆变器、智能电表、电池管理系统(BMS)等各类能源设备,支持IEC61850、IEC101/103/104、DL
    的头像 发表于 01-21 11:39 467次阅读
    <b class='flag-5'>分布式</b>能源管理物联网<b class='flag-5'>解决方案</b>

    智慧能源进万家:分布式光伏运维平台如何助力构建居民级微电网生态系统

    的不断扩大,企业在运维管理方面面临着诸多难题。如何管理分布式光伏电站,确保其稳定、安全运行,成为企业亟待解决的问题。安科瑞电气推出的AcrelCloud-1200分布式光伏运维平台,凭借其良好的性能和丰富的功能,为企业
    的头像 发表于 12-17 17:36 719次阅读
    智慧能源进万家:<b class='flag-5'>分布式</b>光伏运维<b class='flag-5'>云</b>平台如何助力构建居民级微电网生态<b class='flag-5'>系统</b>

    【节能学院】Acrel-1000DP分布式光伏监控系统在奉贤平高食品 4.4MW 分布式光伏中应用

    摘要:在“双碳”和新型电力系统建设背景下,分布式光伏接入比例不断提高,对配电网电压、调度运行及调峰等环节造成强烈冲击。本文设计包含平台层、设备层二层架构体系的分布式光伏管控平台,以及小容量工商业
    的头像 发表于 08-23 08:04 3665次阅读
    【节能学院】Acrel-1000DP<b class='flag-5'>分布式</b>光伏监控<b class='flag-5'>系统</b>在奉贤平高食品 4.4MW <b class='flag-5'>分布式</b>光伏中应用

    分布式光伏发电监测系统技术方案

    分布式光伏发电监测系统技术方案 柏峰【BF-GFQX】一、系统目标 :分布式光伏发电监测系统旨在
    的头像 发表于 08-22 10:51 3472次阅读
    <b class='flag-5'>分布式</b>光伏发电监测<b class='flag-5'>系统</b>技术<b class='flag-5'>方案</b>

    AcrelCloud-1200 分布式光伏运维平台 用于居民屋顶光伏发电

    光伏电站,确保其稳定、安全运行,成为企业亟待解决的问题。安科瑞电气推出的AcrelCloud-1200分布式光伏运维平台,凭借其良好的性能和丰富的功能,为企业分布式光伏运维带来了全新的解决方
    的头像 发表于 08-05 10:48 1172次阅读
    AcrelCloud-1200 <b class='flag-5'>分布式</b>光伏运维<b class='flag-5'>云</b>平台 用于居民屋顶光伏发电

    多电站监管不再难!分布式光伏运维平台的破局之道

    管理方面面临着诸多难题。如何管理分布式光伏电站,确保其稳定、安全运行,成为企业亟待解决的问题。安科瑞电气推出的AcrelCloud-1200分布式光伏运维平台,凭借其良好的性能和丰富的功能,为企业
    的头像 发表于 08-04 16:14 888次阅读
    多电站监管不再难!<b class='flag-5'>分布式</b>光伏运维<b class='flag-5'>云</b>平台的破局之道

    一键部署无损网络:EasyRoCE助力分布式存储效能革命

    分布式存储的性能瓶颈往往在于网络。如何构建一个高带宽、超低时延、零丢包的无损网络,是释放分布式存储全部潜力、赋能企业关键业务(如实时数据库、AI训练、高性能计算)的关键挑战。
    的头像 发表于 08-04 11:34 1819次阅读
    一键部署无损网络:EasyRoCE助力<b class='flag-5'>分布式</b><b class='flag-5'>存储</b>效能革命

    Ceph分布式存储系统解析

    在当今数据爆炸的时代,企业对存储系统的需求日益增长,传统的集中式存储已经无法满足大规模数据处理的要求。分布式存储系统应运而生,而Ceph作为开源分布
    的头像 发表于 07-14 11:15 1224次阅读

    CPU近期适配重点产品介绍

    近期,继续与多家产业伙伴通力合作,围绕开先KX-7000、开胜KH-40000等高性能自主CPU产品持续推进应用生态建设,完成了国产SSD、内存、Web中间件、分布式数据库、大数据基础平台
    的头像 发表于 07-10 17:02 1363次阅读

    简化选型,优化性能!纳微提供完整的集成热管理驱动系统解决方案

    新能源汽车热管理系统正从分布式架构向集成发展,实现电池、电机及座舱空调的高效互联与余热利用,提升性能和效率。纳微提供完整的集成热管理驱
    的头像 发表于 06-27 16:30 1034次阅读
    简化选型,优化性能!纳<b class='flag-5'>芯</b>微提供完整的集成<b class='flag-5'>式</b>热管理驱动<b class='flag-5'>系统</b><b class='flag-5'>解决方案</b>

    曙光存储领跑中国分布式存储市场

    近日,赛迪顾问发布《中国分布式存储市场研究报告(2025)》,指出2024 年中国分布式存储市场首次超过集中式存储,规模达 198.2 亿元
    的头像 发表于 05-19 16:50 1457次阅读

    安科瑞分布式光伏监控系统:高效、安全、智能的绿色能源解决方案

    ?并网标准如何满足?运维成本如何降低?安科瑞电气股份有限公司凭借多年行业经验,创新推出Acrel-1000DP分布式光伏监控系统,为光伏电站提供全生命周期解决方案。 一、分布式光伏发电
    的头像 发表于 05-08 16:40 862次阅读