安装Hadoop
Ubuntu 18.04.1 LTS (on VirtualBox)
Apache hadoop-3.3.1.tar.gz(2021 Jun 15)
JAVA 8 (openjdk version "1.8.0_162")
--
注,2020年7月写过一篇,今天,重新启程。
Hadoop下载地址:
https://hadoop.apache.org/releases.html
选择其中的 Binary download,点击即开始下载(近600MB)。
本文记录 单机安装Hadoop的步骤,参考官文:
Hadoop: Setting up a Single Node Cluster.
目录
1、建立hadoop用户
2、配置免密登录
3、下载&解压
4、修改配置
4.1 etc/hadoop/hadoop-env.sh
5、配置伪分布式模式(pseudo-distributed mode)
5.1 etc/hadoop/core-site.xml
5.2 etc/hadoop/hdfs-site.xml
5.3 创建/data/hadoop
6、启动HDFS
7、配置YARN资源调度器
7.1 etc/hadoop/mapred-site.xml
7.2 etc/hadoop/yarn-site.xml
7.3 启动YARN
7.4 访问资源管理器
参考文档
linux用户/用户密码和用户组管理
3、
4、查看Linux内核版本
5、