安装Hadoop


Ubuntu 18.04.1 LTS (on VirtualBox)

Apache hadoop-3.3.1.tar.gz(2021 Jun 15)

JAVA 8 (openjdk version "1.8.0_162")

--

注,2020年7月写过一篇,今天,重新启程

Hadoop下载地址:

https://hadoop.apache.org/releases.html

选择其中的 Binary download,点击即开始下载(近600MB)。

本文记录 单机安装Hadoop的步骤,参考官文:

Hadoop: Setting up a Single Node Cluster.

目录

1、建立hadoop用户

2、配置免密登录

3、下载&解压

4、修改配置

4.1 etc/hadoop/hadoop-env.sh

5、配置伪分布式模式(pseudo-distributed mode)

5.1 etc/hadoop/core-site.xml

5.2 etc/hadoop/hdfs-site.xml

5.3 创建/data/hadoop

6、启动HDFS

7、配置YARN资源调度器

7.1 etc/hadoop/mapred-site.xml

7.2 etc/hadoop/yarn-site.xml

7.3 启动YARN

7.4 访问资源管理器

参考文档

linux用户/用户密码和用户组管理

3、

4、查看Linux内核版本

5、