资料介绍
为提高Hadoop分布式文件系统(HDFS)的小文件处理效率,提出了一种面向HDFS的智能小文件存取优化方法-SmartFS。SmartFS通过分析小文件访问日志,获取用户访问行为,建立文件关联概率模型,并根据基于文件关联关系的合并算法将小文件组装成大文件之后存至HDFS;当从HDFS获取文件时,根据基于文件关联关系的预取算法来提高文件访问效率,并提出基于预取的缓存替换算法来管理缓存空间,从而提高文件的命中率。实验结果表明,SmartFS有效减少了HDFS中NameNode的元数据空间,减少了用户与HDFS的交互次数,提高了小文件的存储效率和访问速度。

下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 坐标文件
- 自动售货机项目教程及文件下载 0次下载
- VHDL电路优化设计的方法资料下载
- 机床热误差的来源、获取方法及优化方法等 28次下载
- 基于Prtri网优化的CAPTCHA识别方法 4次下载
- 5G NSA优化方法及其相关研究 9次下载
- 将置信规则库分级优化的网络安全态势预测方法 11次下载
- python文件和目录的操作方法介绍和实例说明 7次下载
- python文件和目录的操作方法介绍和实例说明 0次下载
- 使用Python复制文件的方法有哪些 6次下载
- 解决海量小文件存储的大鱼集群存储系统的详细资料介绍 11次下载
- 基于小文件的内存云存储优化策略 0次下载
- 内存取证的内核完整性度量方法 2次下载
- 一种云存储中文件分界点确定方法 0次下载
- 基于打包策略的文件传输策略 1次下载
- 如何优化EPS文件以提高加载速度 1.8k次阅读
- MySQL性能优化方法 1.4k次阅读
- 如何在Linux清空文件内容 2.8k次阅读
- 如何在Linux使用truncate命令将文件缩小或扩展到指定的大小 8.4k次阅读
- 一些对OpenMP进行优化的方法 2.5k次阅读
- 编辑与改写IP核源文件的方法 4.3k次阅读
- 常见文件扩展名及其含义,文件系统的功能 1.2w次阅读
- 大文件Vlookup工具:日常优化工作必备神器 3.3k次阅读
- 虚拟机:Linux查看tar包文件内容的方法 7.6k次阅读
- 判断Linux库文件编译时是否运用-g选项的方法 4.1k次阅读
- 应对海量图片存储的分布式存储解决方案 4.3k次阅读
- 如何优化压缩后大于20MB的PCB文件 3k次阅读
- 探析常见的几种最优化方法 3.2k次阅读
- 新式DRAM存取技术提升动态随机DRAM访问速度 5k次阅读
- mapreduce 中MAP进程的数量怎么控制? 2.2k次阅读
下载排行
本周
- 1MDD品牌三极管MMBT3906数据手册
- 2.33 MB | 次下载 | 免费
- 2MDD品牌三极管S9012数据手册
- 2.62 MB | 次下载 | 免费
- 3联想flex2-14D/15D说明书
- 4.92 MB | 次下载 | 免费
- 4收音环绕扩音机 AVR-1507手册
- 2.50 MB | 次下载 | 免费
- 524Pin Type-C连接器设计报告
- 1.06 MB | 次下载 | 免费
- 6新一代网络可视化(NPB 2.0)
- 3.40 MB | 次下载 | 免费
- 7MS1000TA 超声波测量模拟前端芯片技术手册
- 0.60 MB | 次下载 | 免费
- 8MS1022高精度时间测量(TDC)电路数据手册
- 1.81 MB | 次下载 | 免费
本月
- 1爱华AIWA HS-J202维修手册
- 3.34 MB | 37次下载 | 免费
- 2PC5502负载均流控制电路数据手册
- 1.63 MB | 23次下载 | 免费
- 3NB-IoT芯片厂商的资料说明
- 0.31 MB | 22次下载 | 1 积分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供电电路图资料
- 0.63 MB | 6次下载 | 1 积分
- 5UWB653Pro USB口测距通信定位模块规格书
- 838.47 KB | 5次下载 | 免费
- 6技嘉H110主板IT8628E_BX IO电路图资料
- 2.61 MB | 4次下载 | 1 积分
- 7苏泊尔DCL6907(即CHK-S007)单芯片电磁炉原理图资料
- 0.04 MB | 4次下载 | 1 积分
- 8100W准谐振反激式恒流电源电路图资料
- 0.09 MB | 2次下载 | 1 积分
总榜
- 1matlab软件下载入口
- 未知 | 935137次下载 | 10 积分
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420064次下载 | 10 积分
- 3Altium DXP2002下载入口
- 未知 | 233089次下载 | 10 积分
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191439次下载 | 10 积分
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183353次下载 | 10 积分
- 6labview8.5下载
- 未知 | 81602次下载 | 10 积分
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73822次下载 | 10 积分
- 8LabVIEW 8.6下载
- 未知 | 65991次下载 | 10 积分
电子发烧友App





创作
发文章
发帖
提问
发资料
发视频
上传资料赚积分
评论