ThinkChat2.0新版上线,更智能更精彩,支持会话、画图、阅读、搜索等,送10W Token,即刻开启你的AI之旅 广告
Hadoop是一个由Apache基金会所开发的分布式系统基础架构,可以让开发者在不了解分布式底层细节的情况下,<mark>开发分布式程序,充分利用集群的威力进行高速运算和存储</mark> 。 <br/> Hadoop的框架最核心的设计就是:HDFS和MapReduce。 * HDFS为海量的数据提供了存储; * MapReduce则为海量的数据提供了计算。 广义上来说, Hadoop通常是指一个更广泛的概念——Hadoop生态圈。 ![](https://img.kancloud.cn/27/2c/272caed5d635c59fae566f3a112ee904_1080x504.png) <br/> Hadoop有以下三大发行版本: **1. Apache Hadoop** 官网地址:http://hadoop.apache.org/releases.html 下载地址:https://archive.apache.org/dist/hadoop/common/ DKhadoop发行版:有效的集成了整个HADOOP生态系统的全部组件,并深度优化,重新编译为一个完整的更高性能的大数据通用计算平台,实现了各部件的有机协调。因此DKH相比开源的大数据平台,在计算性能上有了高达5倍(最大)的性能提升。DKhadoop将复杂的大数据集群配置简化至三种节点(主节点、管理节点、计算节点),极大的简化了集群的管理运维,增强了集群的高可用性、高可维护性、高稳定性。 <br/> **2. Cloudera Hadoop** 官网地址:https://www.cloudera.com/downloads/cdh/5-10-0.html 下载地址:http://archive.cloudera.com/cdh5/cdh/5/ Cloudera发行版:CDH是Cloudera的hadoop发行版,完全开源,比Apache hadoop在兼容性,安全性,稳定性上有增强。本文使用的就是CDH版本。 <br/> **3. Hortonworks Hadoop** 官网地址:https://hortonworks.com/products/data-center/hdp/ 下载地址:https://hortonworks.com/downloads/#data-platform Hortonworks发行版:Hortonworks 的主打产品是Hortonworks Data Platform (HDP),也同样是100%开源的产品,其版本特点:HDP包括稳定版本的Apache Hadoop的所有关键组件;安装方便,HDP包括一个现代化的,直观的用户界面的安装和配置工具。