资料介绍
Hadoop 由 Apache Software Foundation 公司于 2005 年秋天作为 Lucene 的子项目 Nutch 的一部分正式引入。它受到最先由 Google Lab 开发的 MapReduce 和 Google File System 的启发。2006 年 3 月份,MapReduce 和 Nutch Distributed File System (NDFS) 分别被纳入称为 Hadoop 的项目中。
Hadoop 是最受欢迎的在 Internet 上对搜索关键字进行内容分类的工具,但它也可以解决许多要求极大伸缩性的问题。例如,如果您要 grep 一个 10TB 的巨型文件,会出现什么情况?在传统的系统上,这将需要很长的时间。但是 Hadoop 在设计时就考虑到这些问题,因此能大大提高效率。
Hadoop 是一个能够对大量数据进行分布式处理的软件框架。但是 Hadoop 是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop 是可靠的,因为它假设计算元素和存储会失败,因此它维护多个工作数据副本,确保能够针对失败的节点重新分布处理。Hadoop 是高效的,因为它以并行的方式工作,通过并行处理加快处理速度。Hadoop 还是可伸缩的,能够处理 PB 级数据。此外,Hadoop 依赖于社区服务器,因此它的成本比较低,任何人都可以使用。
您可能已经想到,Hadoop 运行在 Linux 生产平台上是非常理想的,因为它带有用 Java™ 语言编写的框架。Hadoop 上的应用程序也可以使用其他语言编写,比如 C++。
扫码添加小助手
加入工程师交流群
- 电源架构--集中式电源架构/分布式电源架构
- 基于分布式仿真系统的实时通讯架构 11次下载
- MapReduce框架下分布式编码计算容错算法 2次下载
- 虚拟化模型驱动的分布式数据湖架构设计 5次下载
- 基于分布式数据Cache的实时动态迁移机制 20次下载
- 一种可行的分布式存储系统安全构造方法 21次下载
- 一种分布式网络扫描架构和任务调度算法 19次下载
- 怎么样才能快速搭建Hadoop运行环境 12次下载
- 基于MapReduce架构的分布式母线保护 1次下载
- 基于Hadoop分布式监控平台系统 17次下载
- 基于Hadoop集群的分布式入侵检测系统的设计与实现_谢天宇 0次下载
- 用Linux和Apache Hadoop进行云计算
- 基于J2EE的分布式计算机联锁控制系统
- 基于树状和分布式架构的MAP发现协议
- SP766X在分布式电源架构中的应用
- 分布式光伏环境监测站的技术架构与应用实践 381次阅读
- Hadoop是什么?其核心由两大部分组成,分别是什么? 3k次阅读
- 鸿蒙分布式相机“踩坑”分享 3.1k次阅读
- 详谈分布式系统的定义及属性 4.6k次阅读
- 分布式光纤传感器原理_分布式光纤传感器的应用 9.8k次阅读
- 什么是Hadoop? Spark和Hadoop对比 7.1k次阅读
- spark和hadoop的区别 1.6w次阅读
- hadoop云存储解决方案 7.1k次阅读
- 基于 FPGA 客户端的分布式计算网络设计 1.7k次阅读
- Hadoop_java与python的关系 3.9k次阅读
- hadoop基础知识介绍_hadoop是什么语言开发的_hadoop能做什么 4w次阅读
- hadoop是什么_华为大数据平台hadoop你了解多少 2.4w次阅读
- hadoop开发环境搭建 3.1k次阅读
- hadoop优缺点分析 1.8w次阅读
- 雾计算工作组发布雾计算参考架构 1.9k次阅读
下载排行
本周
- 1MDD品牌三极管BC807数据手册
- 3.00 MB | 次下载 | 免费
- 2MDD品牌三极管BC817数据手册
- 2.51 MB | 次下载 | 免费
- 3MDD品牌三极管D882数据手册
- 3.49 MB | 次下载 | 免费
- 4MDD品牌三极管MMBT2222A数据手册
- 3.26 MB | 次下载 | 免费
- 5MDD品牌三极管MMBTA56数据手册
- 3.09 MB | 次下载 | 免费
- 6MDD品牌三极管MMBTA92数据手册
- 2.32 MB | 次下载 | 免费
- 7STM32G474 HRTIME PWM 丢波问题分析与解决
- 1.00 MB | 次下载 | 3 积分
- 8新能源电动汽车高压线束的铜铝连接解决方案
- 2.71 MB | 次下载 | 2 积分
本月
- 1爱华AIWA HS-J202维修手册
- 3.34 MB | 37次下载 | 免费
- 2PC5502负载均流控制电路数据手册
- 1.63 MB | 23次下载 | 免费
- 3NB-IoT芯片厂商的资料说明
- 0.31 MB | 22次下载 | 1 积分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供电电路图资料
- 0.63 MB | 6次下载 | 1 积分
- 5UWB653Pro USB口测距通信定位模块规格书
- 838.47 KB | 5次下载 | 免费
- 6技嘉H110主板IT8628E_BX IO电路图资料
- 2.61 MB | 4次下载 | 1 积分
- 7苏泊尔DCL6907(即CHK-S007)单芯片电磁炉原理图资料
- 0.04 MB | 4次下载 | 1 积分
- 8苏泊尔DCL6909(即CHK-S009)单芯片电磁炉原理图资料
- 0.08 MB | 2次下载 | 1 积分
总榜
- 1matlab软件下载入口
- 未知 | 935137次下载 | 10 积分
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420064次下载 | 10 积分
- 3Altium DXP2002下载入口
- 未知 | 233089次下载 | 10 积分
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191439次下载 | 10 积分
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183353次下载 | 10 积分
- 6labview8.5下载
- 未知 | 81602次下载 | 10 积分
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73822次下载 | 10 积分
- 8LabVIEW 8.6下载
- 未知 | 65991次下载 | 10 积分
电子发烧友App





创作
发文章
发帖
提问
发资料
发视频
上传资料赚积分
评论