Hadoop 集群环境搭建

目录

第一部分:系统安装… 3

1:图形化安装… 3

2:选择中文… 3

3:安装选项… 3

4:软件选项… 4

5:安装位置… 4

6:网络配置… 6

7:开始安装… 7

8:创建用户… 7

9:重启系统… 7

10:登录测试… 8

第二部分:初始化设置… 9

1:SSH远程登录… 9

2:yum 源更新… 9

3:安装vim和wget. 11

4:增加test 用户权限… 12

5:修改主机 /tec/hosts 文件… 14

6:配置test 账户免密ssh 登录… 15

7:防火墙设置开机关闭… 17

第三部分:Java jdk 安装配置… 19

1:检查JAVA状态… 19

2:安装JAVA 1.8. 19

3:配置环境变量… 20

第四部分:Hadoop 集群安装… 22

1:下载hadoop. 22

2:修改环境变量… 23

3:节点配置… 24

1:主节点安装(server1)… 24

2:备节点安装(server2 server3)… 28

第五部分:Hadoop 状态检查和常用命令… 31

1:网页状态查看… 31

2:控制台命令… 32

1:常用排查故障命令… 32

2:常用基础命令… 32

3:HDFS命令(Hadoop分布式文件系统)… 32

4:MapReduce作业运行命令… 33

5:YARN(Yet Another Resource Negotiator)命令… 33

6:Hadoop集群管理命令… 33

7:Hadoop配置文件管理命令… 33

第一部分:系统安装

大致过程:软件安装选择——-磁盘分区——-IP地址设置—–用户名密码设置

1:图形化安装

这里选择图形化安装。

Hadoop 集群环境搭建

2:选择中文

选择语言为中文。

Hadoop 集群环境搭建

3:安装选项

设置对应的安装选项。

Hadoop 集群环境搭建

4:软件选项

选择最小安装和系统管理工具。

Hadoop 集群环境搭建

5:安装位置

选择对应的磁盘并手动配置磁盘各分区大小。

Hadoop 集群环境搭建

点击自动创建

Hadoop 集群环境搭建

调整 /home 分区和/ 分区的大小,因为Hadoop默认的存储路径是在/目录下,所以/目录需要分配大一点。

Hadoop 集群环境搭建

分配后的各部分大小。

Hadoop 集群环境搭建
Hadoop 集群环境搭建

6:网络配置

手动指定IP地址和主机名。

215三台分别是192.168.1.190/191/192

Hadoop 集群环境搭建
Hadoop 集群环境搭建

7:开始安装

本文来自网络,不代表协通编程立场,如若转载,请注明出处:https://www.net2asp.com/aa209733fa.html