电子发烧友App
创作
发文章
发帖 
提问 
发资料
发视频资料介绍
大图数据的处理与分析是近年来的热点研究问题，分布式图计算是目前处理大图数据的主流技术，但是存在诸多无法避免的问题。比如分布式计算的负载均衡和分布式实现的调试和优化仍然非常困难．另一方面。近几年的研究表明。通过设计合理的数据结构和处理模型，在单个PC上基于大容量磁盘的大图计算往往可以获得与分布式图计算相当的处理性能．本文结合累加迭代计算和单机并行处理技术，提出流式处理的异步计算模型ASP．它实现了对磁盘的完全顺序访问。允许流式的顺序载入结构数据的同时进行异步更新计算，基于ASP模型，我们提出了一种流式处理的异步图处理框架S-Maiter，实现了高效率的基于外存的单机大图处理。通过I/O线程优化、内存资源监控、shard级优先级调度等优化技术，大大提高了系统处理大图数据的性能．实验结果表明，在处理大图数据（1300万顶点。5亿连边）时，仅仅需要1台PC机计算资源的S-Maiter与在16台PC上运行的分布式Maiter的性能几乎相当．并且S-Maiter比另外一个流行的单机大图处理系统GraphChi怏1.5倍．
流式
加入交流群
扫码添加小助手
加入工程师交流群
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 一种面向现代应用处理器的PMIC
- USART中断方式接收无响应问题的一种情况及其处理方法资料下载
- 一种基于框架特征的共指消解方法 7次下载
- 如何将一种异步时钟域转换成同步时钟域 5次下载
- 如何使用FPGA实现一种图像预处理结构及典型算法 37次下载
- 一种高性能数据处理模块 1次下载
- 一种阈值调控节能策略 0次下载
- 一种成分取证的理论分析模式的分类框架 0次下载
- 一种实用的铜电阻测温的信号处理方法 23次下载
- 一种WCDMA基带信号处理方法的研究 12次下载
- 一种处理信号相位误差电路的设计 45次下载
- .NET下不连续异步消息处理的研究 17次下载
- 纳滤(NF)膜法—— 一种新型的水处理技术
- 一种基于TMS320VC33 DSP的通用图像处理系统设计
- 一种基于共享总线的冗余容错多处理器系统
- 一种实时多线程VSLAM框架vS-Graphs介绍 818次阅读
- dsp是嵌入式微处理器的一种设备吗 ARM嵌入式微处理器有何特点? 1.9k次阅读
- 一种可重构的硬件处理器方法 1.7k次阅读
- DeferredResult异步请求处理 提高系统吞吐量的一把利器 1.9k次阅读
- 同步整流式和异步整流式DC/DC转换器变压器方式的区别 6.3k次阅读
- 一种基于FPGA内部存储器的适合音频解嵌的高效异步FIFO设计 1.3k次阅读
- 人工智能是一种改进数据控制和处理的方法 3.6k次阅读
- 基于流式计算的DPI数据处理方案 5.8k次阅读
- 一种异质多传感器的异步量测融合算法验证 2k次阅读
- 关于一种面向异步FIFO的低开销容错机制研究 3.8k次阅读
- 介绍学习一种模拟信号的处理方式：对数处理 1.2w次阅读
- 图像其实是一种波，可以用波的算法处理图像 1.1w次阅读
- 一种基于DSP＋FPGA视频图像采集处理系统的设计与实现 5.7k次阅读
- 一种基于Mailbox核间机制的多核处理系统 1.3w次阅读
- 用FPGA芯片实现高速异步FIFO的一种方法 9.3k次阅读
上传资料赚积分下载排行
本周
- 1MDD品牌三极管MMBT3906数据手册
- 2.33 MB | 次下载 | 免费
- 2MDD品牌三极管S9012数据手册
- 2.62 MB | 次下载 | 免费
- 3联想flex2-14D/15D说明书
- 4.92 MB | 次下载 | 免费
- 4收音环绕扩音机 AVR-1507手册
- 2.50 MB | 次下载 | 免费
- 524Pin Type-C连接器设计报告
- 1.06 MB | 次下载 | 免费
- 6新一代网络可视化（NPB 2.0）
- 3.40 MB | 次下载 | 免费
- 7MS1000TA 超声波测量模拟前端芯片技术手册
- 0.60 MB | 次下载 | 免费
- 8MS1022高精度时间测量(TDC)电路数据手册
- 1.81 MB | 次下载 | 免费
本月
- 1爱华AIWA HS-J202维修手册
- 3.34 MB | 37次下载 | 免费
- 2PC5502负载均流控制电路数据手册
- 1.63 MB | 23次下载 | 免费
- 3NB-IoT芯片厂商的资料说明
- 0.31 MB | 22次下载 | 1 积分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供电电路图资料
- 0.63 MB | 6次下载 | 1 积分
- 5UWB653Pro USB口测距通信定位模块规格书
- 838.47 KB | 5次下载 | 免费
- 6技嘉H110主板IT8628E_BX IO电路图资料
- 2.61 MB | 4次下载 | 1 积分
- 7苏泊尔DCL6907(即CHK-S007)单芯片电磁炉原理图资料
- 0.04 MB | 4次下载 | 1 积分
- 8100W准谐振反激式恒流电源电路图资料
- 0.09 MB | 2次下载 | 1 积分
总榜
- 1matlab软件下载入口
- 未知 | 935137次下载 | 10 积分
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420064次下载 | 10 积分
- 3Altium DXP2002下载入口
- 未知 | 233089次下载 | 10 积分
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191439次下载 | 10 积分
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183353次下载 | 10 积分
- 6labview8.5下载
- 未知 | 81602次下载 | 10 积分
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73822次下载 | 10 积分
- 8LabVIEW 8.6下载
- 未知 | 65991次下载 | 10 积分
工商网监
评论