资料介绍
机器学习领域内的多数模型均需要通过迭代计算以求解其最优参数,而MapReduce模型在迭代计算中的缺陷不足导致其在迭代计算中无法得到广泛应用。为解决上述矛盾,基于MapReduce模型提出并实现了一种可用于模型参数求解的并行迭代模型MRI。MRI模型在保持Map以及Reduce阶段的基础上,新增了Iterate阶段以及相关通信协议,实现了迭代过程中模型参数的更新、分发与迭代控制;通过对MapReduce状态机进行增强,实现了节点任务的重用,避免了迭代过程中节点任务重复创建、初始化以及回收带来的性能开销;在任务节点实现了数据缓存,保障了数据的本地性,并在Map节点增加了基于内存的块缓存机制,进一步提高训练集加载效率,以提高整体迭代效率。基于梯度下降算法的实验结果表明:MRI模型在并行迭代计算方面性能优于MapReduce模型。

下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 面向移动终端图像颜色显示的节能模型 5次下载
- 面向学分银行的区块链学习成果管控模型综述 5次下载
- 基于MapReduce并行处理的机电特种设备故障诊断 13次下载
- 面向双目立体视觉的迭代式局部颜色校正方法 5次下载
- 面向人脸识别的FusNet网络模型 8次下载
- 基于MapReduce的时间序列索引及数据查询 7次下载
- 一种面向MapReduce的中间数据传输流水线优化机制 4次下载
- 声子BTE方程迭代求解在GPU上的并行加速方案 24次下载
- 基于MapReduce和加权网络信息熵的DBWGIE-MR算法 11次下载
- 基于迭代膨胀卷积神经网络与ATT的实体名识别方法 6次下载
- MapReduce连接查询的IO代价研究 0次下载
- 基于MapReduce的新会话识别方法 0次下载
- 基于MapReduce的并行化轨迹压缩方法 0次下载
- 面向大数据的并行分类混合算法研究 0次下载
- 算法隐含并行性的物理模型
- 基于PyTorch的模型并行分布式训练Megatron解析 5.5k次阅读
- 大模型分布式训练并行技术(一)-概述 2.5k次阅读
- 以Gpipe作为流水线并行的范例进行介绍 1.9k次阅读
- 基于动量的迭代算法来构造对抗扰动以攻击黑盒和白盒模型 6.5k次阅读
- 基于OpenMP的电磁场FDTD并行方法的程序设计 1.7k次阅读
- 一种基于MapReduce模型的并行化k-medoids聚类算法 6k次阅读
- PRAM模型、BSP模型、LogP模型优缺点分析 1.8w次阅读
- mapreduce二次排序_ mapreduce二次排序原理 6.6k次阅读
- mapreduce工作原理图文详解_Map、Reduce任务中Shuffle和排序 1w次阅读
- Mapreduce和Hive中map reduce个数设定 6.5k次阅读
- mapreduce的应用开发步骤 5.1k次阅读
- 详解MapReduce的模式、算法和用例 7.5k次阅读
- mapreduce编程实例 1.7w次阅读
- 什么是mapreduce_mapreduce工作原理_mapreduce_mapreduce逻辑模型图 2.6w次阅读
- 基于FPGA的并行硬件ECC模型的设计 6.5k次阅读
下载排行
本周
- 1MDD品牌三极管MMBT3906数据手册
- 2.33 MB | 次下载 | 免费
- 2MDD品牌三极管S9012数据手册
- 2.62 MB | 次下载 | 免费
- 3联想flex2-14D/15D说明书
- 4.92 MB | 次下载 | 免费
- 4收音环绕扩音机 AVR-1507手册
- 2.50 MB | 次下载 | 免费
- 524Pin Type-C连接器设计报告
- 1.06 MB | 次下载 | 免费
- 6新一代网络可视化(NPB 2.0)
- 3.40 MB | 次下载 | 免费
- 7MS1000TA 超声波测量模拟前端芯片技术手册
- 0.60 MB | 次下载 | 免费
- 8MS1022高精度时间测量(TDC)电路数据手册
- 1.81 MB | 次下载 | 免费
本月
- 1爱华AIWA HS-J202维修手册
- 3.34 MB | 37次下载 | 免费
- 2PC5502负载均流控制电路数据手册
- 1.63 MB | 23次下载 | 免费
- 3NB-IoT芯片厂商的资料说明
- 0.31 MB | 22次下载 | 1 积分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供电电路图资料
- 0.63 MB | 6次下载 | 1 积分
- 5UWB653Pro USB口测距通信定位模块规格书
- 838.47 KB | 5次下载 | 免费
- 6技嘉H110主板IT8628E_BX IO电路图资料
- 2.61 MB | 4次下载 | 1 积分
- 7苏泊尔DCL6907(即CHK-S007)单芯片电磁炉原理图资料
- 0.04 MB | 4次下载 | 1 积分
- 8100W准谐振反激式恒流电源电路图资料
- 0.09 MB | 2次下载 | 1 积分
总榜
- 1matlab软件下载入口
- 未知 | 935137次下载 | 10 积分
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420064次下载 | 10 积分
- 3Altium DXP2002下载入口
- 未知 | 233089次下载 | 10 积分
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191439次下载 | 10 积分
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183353次下载 | 10 积分
- 6labview8.5下载
- 未知 | 81602次下载 | 10 积分
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73822次下载 | 10 积分
- 8LabVIEW 8.6下载
- 未知 | 65991次下载 | 10 积分
电子发烧友App





创作
发文章
发帖
提问
发资料
发视频
上传资料赚积分
评论