电子发烧友App
创作
发文章
发帖 
提问 
发资料
发视频资料介绍
针对Spark数据集不可变，以及Java虚拟机（JVM）依赖环境引起的代码执行、内存管理、数据序列化／反序列化等开销过多的不足，采用C/C++语言，设计并实现了一种轻量级的大数据运算系统-Helius。Helius支持Spark的基本操作，同时允许数据集整体修改；同时，Helius利用C/C++优化内存管理和网络传输，并采用stateless worker机制简化分布式计算平台的容错恢复过程。实验结果显示：5次迭代中，Helius运行PageRank算法的时间仅为Spark的25. 12% - 53. 14%，运行TPCH Q6的时间仅为Spark的57. 37%；在PageRank迭代1次的基础上，运行在Helius系统下时，master节点IP接收和发送数据量约为运行于Spark系统的40%和15%，而且200 s的运行过程中，Helius占用的总内存约为Spark的25%。实验结果与分析表明，与Spark相比，Helius具有节约内存、不需要序列化和反序列化、减少网络交互以及容错简单等优点。
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 轻量级的SDN数据包转发验证方案 10次下载
- 基于Feistel结构的超轻量级分组密码算法 4次下载
- 基于轻量级虚拟化的LDDoS仿真攻防方法 6次下载
- 轻量级分布式机器学习系统及算法 16次下载
- 基于YOLO改进的轻量级交通标识检测模型 12次下载
- 一种逐层分组卷积并构建轻量级网络结构SKASNet 10次下载
- 一种轻量级时间卷积网络设计方案 6次下载
- 基于位重排变换的超轻量级RFID双向认证协议 2次下载
- Protothreads极轻量级系统的详细资料简介
- 轻量级协议栈LWIP如何进行分析与改进 5次下载
- 一种超轻量级群组射频识别标签所有权转移协议 1次下载
- 一种轻量级的大数据分析系统 10次下载
- 轻量级RFID安全协议 22次下载
- 一种嵌入式Linux轻量级GUI系统设计
- 一种嵌入式Linux轻量级GUI系统设计
- 一种新型激光雷达惯性视觉里程计系统介绍 903次阅读
- 基于Openharmony轻量级操作系统的分布式数据管理开发案例 2.7k次阅读
- Linux轻量级工具集合Busybox的特点和使用 2.4k次阅读
- 一个轻量级的权限认证框架：Sa-Token 4.2k次阅读
- 一个纯Python编写的轻量级数据库 1.8k次阅读
- 针对单片机开发的轻量级OTA组件 2.3k次阅读
- TinyDB轻量级数据库有哪些特点呢 2.6k次阅读
- 一款适合初学者超轻量级C语言网络库—Dyad 3.3k次阅读
- 轻量级Kubernetes-K3S工具介绍 3.5k次阅读
- 一种基于智慧运营平台，将大数据技术和数据挖掘技术相结合 8k次阅读
- 一种网络大数据协作融合算法 4.9k次阅读
- 全球首款轻量级机械臂已经出现了！ 8.2k次阅读
- 谷歌开源TFGAN轻量级的工具库 目的是让训练和评估GAN变得更加简单 5.6k次阅读
- 谷歌开发一个轻量级的库——TFGAN 它可以让生成对抗网络更易于实验 6k次阅读
- 一种AES密码算法的实现 3.7k次阅读
上传资料赚积分下载排行
本周
- 1MDD品牌三极管BC807数据手册
- 3.00 MB | 次下载 | 免费
- 2MDD品牌三极管BC817数据手册
- 2.51 MB | 次下载 | 免费
- 3MDD品牌三极管D882数据手册
- 3.49 MB | 次下载 | 免费
- 4MDD品牌三极管MMBT2222A数据手册
- 3.26 MB | 次下载 | 免费
- 5MDD品牌三极管MMBTA56数据手册
- 3.09 MB | 次下载 | 免费
- 6MDD品牌三极管MMBTA92数据手册
- 2.32 MB | 次下载 | 免费
- 7STM32G474 HRTIME PWM 丢波问题分析与解决
- 1.00 MB | 次下载 | 3 积分
- 8新能源电动汽车高压线束的铜铝连接解决方案
- 2.71 MB | 次下载 | 2 积分
本月
- 1爱华AIWA HS-J202维修手册
- 3.34 MB | 37次下载 | 免费
- 2PC5502负载均流控制电路数据手册
- 1.63 MB | 23次下载 | 免费
- 3NB-IoT芯片厂商的资料说明
- 0.31 MB | 22次下载 | 1 积分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供电电路图资料
- 0.63 MB | 6次下载 | 1 积分
- 5UWB653Pro USB口测距通信定位模块规格书
- 838.47 KB | 5次下载 | 免费
- 6技嘉H110主板IT8628E_BX IO电路图资料
- 2.61 MB | 4次下载 | 1 积分
- 7苏泊尔DCL6907(即CHK-S007)单芯片电磁炉原理图资料
- 0.04 MB | 4次下载 | 1 积分
- 8苏泊尔DCL6909(即CHK-S009)单芯片电磁炉原理图资料
- 0.08 MB | 2次下载 | 1 积分
总榜
- 1matlab软件下载入口
- 未知 | 935137次下载 | 10 积分
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420064次下载 | 10 积分
- 3Altium DXP2002下载入口
- 未知 | 233089次下载 | 10 积分
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191439次下载 | 10 积分
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183353次下载 | 10 积分
- 6labview8.5下载
- 未知 | 81602次下载 | 10 积分
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73822次下载 | 10 积分
- 8LabVIEW 8.6下载
- 未知 | 65991次下载 | 10 积分
工商网监
评论