跳到主要内容

Hadoop

Hadoop版本​

  1. Hadoop1.0：包括Common、HDFS、MapReduce

  2. Hadoop2.0：包括Common、HDFS、MapReduce、YARN。Hadoop1.0和Hadoop2.0不兼容。从Hadoop2.7版本开始，包含了Ozone，从Hadoop2.10版本开始，包含了Submarine

  3. Hadoop3.0：包括了Common、HDFS、MapReduce、YARN以及Ozone模块，最新的Hadoop3.0版本中包含了Submarine

Hadoop模块​

1. Hadoop Common：用于支持其他模块​

  1. Hadoop Distributed File System (HDFS™)：分布式存储
  2. Hadoop YARN：任务调度和资源管理
  3. Hadoop MapReduce：基于YARN的分布式计算框架
  4. Hadoop Ozone：对象存储
  5. Hadoop Submarine：机器学习引擎

Hadoop安装​

单机安装及配置​

  • Hadoop伪分布式安装.txt
  • Hadoop完全分布式搭建.txt

Hadoop2.0和Hadoop3.0的区别​

协议
本作品代码部分采用Apache 2.0协议 进行许可。遵循许可的前提下，你可以自由地对代码进行修改，再发布，可以将代码用作商业用途。但要求你：
  • 署名：在原有代码和衍生代码中，保留原作者署名及代码来源信息。
  • 保留许可证：在原有代码和衍生代码中，保留Apache 2.0协议文件。
本作品文档部分采用知识共享署名 4.0 国际许可协议 进行许可。遵循许可的前提下，你可以自由地共享，包括在任何媒介上以任何形式复制、发行本作品，亦可以自由地演绎、修改、转换或以本作品为基础进行二次创作。但要求你：
  • 署名：应在使用本文档的全部或部分内容时候，注明原作者及来源信息。
  • 非商业性使用：不得用于商业出版或其他任何带有商业性质的行为。如需商业使用，请联系作者。
  • 相同方式共享的条件：在本文档基础上演绎、修改的作品，应当继续以知识共享署名 4.0国际许可协议进行许可。