电子发烧友App
创作
发文章
发帖 
提问 
发资料
发视频资料介绍
软件简介
Tuplex 是一个并行的大数据处理框架，它以编译代码的速度运行用 Python 编写的数据科学管道。Tuplex 具有与Apache Spark或Dask类似的 Python API ，但与调用 Python 解释器不同，Tuplex 为给定的管道和输入数据集生成优化的 LLVM 字节码。在底层，Tuplex 基于数据驱动编译和双模式处理，这两项关键技术使 Tuplex 能够提供与手工优化的 C++ 编写的流水线相媲美的速度。
安装
要安装 Tuplex，您可以使用适用于 Linux 的 PyPi 包，或适用于 MacOS 的 Docker 容器，这将启动预装 Tuplex 的 jupyter notebook。
Docker
docker run -p 8888:8888 tuplex/tuplex
PyPI
pip install tuplex
构建
Tuplex 适用于 MacOS 和 Linux。当前版本已在 MacOS 10.13-10.15 和 Ubuntu 18.04 和 20.04 LTS 下测试。要安装 Tuplex，只需先安装依赖项，然后构建包。
MacOS 从源代码构建
要构建 Tuplex，您首先需要其他几个可以通过 brew 轻松安装的软件包。
brew install llvm@9 boost boost-python3 aws-sdk-cpp pcre2 antlr4-cpp-runtime googletest gflags yaml-cpp celero
python3 -m pip cloudpickle numpy
python3 setup.py install
从源代码构建 Ubuntu
为了便于安装 Ubuntu 的依赖项，我们提供了两个脚本（scripts/ubuntu1804/install_reqs.sh适用于 Ubuntu 18.04 或scripts/ubuntu2004/install_reqs.shUbuntu 20.04）。要创建 Tuplex 的最新版本，只需运行
./scripts/ubuntu1804/install_reqs.sh
python3 -m pip cloudpickle numpy
python3 setup.py install
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- Python语言在AI、大数据方面的重要性 25次下载
- 基于并行约束规划的大数据平台最大团识别算法 2次下载
- 大数据海量数据处理方法总结 13次下载
- 从Excel到Python数据分析进阶指南资源下载 0次下载
- 使用相似连接进行多源数据并行预处理的方法概述 12次下载
- Python数据处理代码合集免费下载 7次下载
- 大数据的基础起源发展和处理流程应用及面临的挑战和展望 12次下载
- 云平台下图数据处理技术 0次下载
- 大数据精准挖据处理架构及神经网络的预测模型 2次下载
- 基于大数据的RTL架构 7次下载
- Thumb数据处理指令 0次下载
- 面向大数据集的粗粒度并行聚类算法研究 22次下载
- MATLAB数据处理与应用 李强 0次下载
- 并行空间数据处理系统的设计 12次下载
- 基于模糊关联规则并行挖掘算法的飞行数据处理 12次下载
- Python Web框架Django 5.0新特性 540次阅读
- MATLAB文件读写和数据处理的详细解释 1797次阅读
- 数据处理的基本问题 682次阅读
- 什么是大数据采集和预处理 3053次阅读
- 一行Python代码如何实现并行化 802次阅读
- 基于流式计算的DPI数据处理方案 4635次阅读
- 如何用Python实现一个大数据搜索引擎 2664次阅读
- 深入解析大数据处理基本步骤 3953次阅读
- 什么是大数据 大数据处理基本步骤讲解 9058次阅读
- 浅析大数据处理的关键技术及应用 8315次阅读
- 大数据处理的三大流程以及大数据的价值 5539次阅读
- 将Python数据处理速度提升2~6倍的简单方法 4294次阅读
- 机器学习实例：Spark与Python结合设计 2609次阅读
- 工业大数据一般如何进行处理呢？ 1w次阅读
- hadoop是什么_华为大数据平台hadoop你了解多少 2.2w次阅读
上传资料赚积分下载排行
本周
- 1山景DSP芯片AP8248A2数据手册
- 1.06 MB | 532次下载 | 免费
- 2RK3399完整板原理图（支持平板，盒子VR）
- 3.28 MB | 339次下载 | 免费
- 3TC358743XBG评估板参考手册
- 1.36 MB | 330次下载 | 免费
- 4DFM软件使用教程
- 0.84 MB | 295次下载 | 免费
- 5元宇宙深度解析—未来的未来-风口还是泡沫
- 6.40 MB | 227次下载 | 免费
- 6迪文DGUS开发指南
- 31.67 MB | 194次下载 | 免费
- 7元宇宙底层硬件系列报告
- 13.42 MB | 182次下载 | 免费
- 8FP5207XR-G1中文应用手册
- 1.09 MB | 178次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234315次下载 | 免费
- 2555集成电路应用800例(新编版)
- 0.00 MB | 33566次下载 | 免费
- 3接口电路图大全
- 未知 | 30323次下载 | 免费
- 4开关电源设计实例指南
- 未知 | 21549次下载 | 免费
- 5电气工程师手册免费下载(新编第二版pdf电子书)
- 0.00 MB | 15349次下载 | 免费
- 6数字电路基础pdf(下载)
- 未知 | 13750次下载 | 免费
- 7电子制作实例集锦 下载
- 未知 | 8113次下载 | 免费
- 8《LED驱动电路设计》 温德尔著
- 0.00 MB | 6656次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935054次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537798次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420027次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234315次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191187次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183279次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138040次下载 | 免费
工商网监
评论