资料介绍
传统数据去重备份系统在大数据应用场景下存在备份存储空间过大和数据吞吐量不足等缺点。为此,基于数据路由设计一种分布式备份数据去重系统。该系统以数据片为去重粒度,具有数据路由和数据预取2个功能。数据路由使用布隆过滤器对需要处理的数据片进行路由查询,数据预取则使用平均取样和基于Jaccard距离的近邻取样方案。通过数据路由分配数据片到相应处理节点进行处理,平均取样得到的数据片哈希码为数据路由提供路由信息,近邻取样得到的数据片哈希码用于系统首次数据去重。实验结果表明,该系统在保证数据去重率的同时,相对全节点查询和定点路由的数据片路由方式数据吞吐量提升明显。

分布式
加入交流群
扫码添加小助手
加入工程师交流群
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 分布式电源对配电系统的影响分析
- 虚拟化模型驱动的分布式数据湖架构设计 5次下载
- 基于分布式数据Cache的实时动态迁移机制 20次下载
- 一种可行的分布式存储系统安全构造方法 21次下载
- 区块链中的分布式数据库管理系统相关研究 8次下载
- 基于分布式文件系统元数据操作优化 0次下载
- 基于OpenStack的分布式虚拟路由流量统计设计研究 0次下载
- 大数据环境下的分布式数据流处理关键技术探析 0次下载
- 实例分析分布式数据存储协议对比 0次下载
- 基于分布式数据库系统的数据分配模型研究
- 基于数据的分布式网络视觉监控系统设计与实现
- 基于USB的大型建筑分布式数据采集系统
- 基于分布式数据库技术的森林防火指挥系统的研究
- 分布式VOIP侦听系统的设计
- 分布式数据库系统及其应用 PDF 0次下载
- 【节能学院】Acrel-1000DP分布式光伏监控系统在奉贤平高食品 4.4MW 分布式光伏中应用 3.4k次阅读
- Ceph分布式存储系统解析 828次阅读
- Java手写分布式锁的实现 1.3k次阅读
- tldb提供分布式锁使用方法 1.7k次阅读
- 深入理解redis分布式锁 1.7k次阅读
- 如何通过分布式数据管理实现多台设备间的数据同步更新 4.5k次阅读
- 利用NI VeriStand 2010实现分布式同步系统的设计 4.1k次阅读
- 保护备份数据免受勒索病毒攻击的方法 3.7k次阅读
- 干货:解决分布式缓存与数据库的双存储双写 3.1k次阅读
- 详谈分布式系统的定义及属性 4.6k次阅读
- 关于腾讯的开源分布式存储系统DCache 2.3k次阅读
- 浅谈分布式块存储的元数据服务设计 5.4k次阅读
- 冷备份的优缺点_数据库冷备份教程详解 3.3k次阅读
- 深度解读分布式存储技术之分布式剪枝系统 2.2k次阅读
- 利用FPGA实现无线分布式采集系统设计 1.4k次阅读
下载排行
本周
- 1MDD品牌三极管MMBT3906数据手册
- 2.33 MB | 次下载 | 免费
- 2MDD品牌三极管S9012数据手册
- 2.62 MB | 次下载 | 免费
- 3联想flex2-14D/15D说明书
- 4.92 MB | 次下载 | 免费
- 4收音环绕扩音机 AVR-1507手册
- 2.50 MB | 次下载 | 免费
- 524Pin Type-C连接器设计报告
- 1.06 MB | 次下载 | 免费
- 6新一代网络可视化(NPB 2.0)
- 3.40 MB | 次下载 | 免费
- 7MS1000TA 超声波测量模拟前端芯片技术手册
- 0.60 MB | 次下载 | 免费
- 8MS1022高精度时间测量(TDC)电路数据手册
- 1.81 MB | 次下载 | 免费
本月
- 1爱华AIWA HS-J202维修手册
- 3.34 MB | 37次下载 | 免费
- 2PC5502负载均流控制电路数据手册
- 1.63 MB | 23次下载 | 免费
- 3NB-IoT芯片厂商的资料说明
- 0.31 MB | 22次下载 | 1 积分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供电电路图资料
- 0.63 MB | 6次下载 | 1 积分
- 5UWB653Pro USB口测距通信定位模块规格书
- 838.47 KB | 5次下载 | 免费
- 6技嘉H110主板IT8628E_BX IO电路图资料
- 2.61 MB | 4次下载 | 1 积分
- 7苏泊尔DCL6907(即CHK-S007)单芯片电磁炉原理图资料
- 0.04 MB | 4次下载 | 1 积分
- 8100W准谐振反激式恒流电源电路图资料
- 0.09 MB | 2次下载 | 1 积分
总榜
- 1matlab软件下载入口
- 未知 | 935137次下载 | 10 积分
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420064次下载 | 10 积分
- 3Altium DXP2002下载入口
- 未知 | 233089次下载 | 10 积分
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191439次下载 | 10 积分
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183353次下载 | 10 积分
- 6labview8.5下载
- 未知 | 81602次下载 | 10 积分
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73822次下载 | 10 积分
- 8LabVIEW 8.6下载
- 未知 | 65991次下载 | 10 积分
电子发烧友App





创作
发文章
发帖
提问
发资料
发视频
上传资料赚积分
评论