hdfs常用端口号、常用配置文件，集群时间同步

• 算法结构

目录

常用端口号

hadoop3.x

HDFS NameNode 内部通常端口：8020/9000/9820

HDFS NameNode 对用户的查询端口：9870

历史服务器：19888

hadoop2.x

HDFS NameNode 内部通常端口： 8020/9000/9820

HDFS NameNode 对用户的查询端口：50070

Yarn查看任务运行情况：8088

历史服务器：19888

常用的配置文件

3.x版本

  • core-xite.xml
  • hdfs-site.xml
  • yarn-site.xml
  • mapred-site.xml
  • workers

    2.x版本

  • core-xite.xml
  • hdfs-site.xml
  • yarn-site.xml
  • mapred-site.xml
  • slaves

集群时间同步（不太需要使用）

生产环境：如果服务器能连接外网，则不需要时间同步，

如果不能连接外网则

  1. 查看所有节点ntpd服务状态和开机自启动状态
systemctl status ntpd

在这里插入图片描述

发现无，于是安装一下，非常简单

yum -y install ntp

再次通过命令查询状态

在这里插入图片描述

通过命令启动

systemctl start ntpd

再将其设置为开机自启

systemctl is-enabled ntpd

2.修改hadoop102的ntp.conf配置文件

vim /etc/ntp.conf

在这里插入图片描述

找到这行，将注释去掉并将ip改为自己的ip

在这里插入图片描述

在这里插入图片描述

再把这几行注释

在这里插入图片描述

最后加上这几行内容，剩下的节点要将与外网同步关闭

在其他机器配置1分钟与时间服务器同步一次

crontab -e

编写定时任务如下

*/1 * * * * /usr/sbin/ntpdate hadoop102

查询下当前时间

hadoop103当前时间

在这里插入图片描述

hadoop102当前时间

在这里插入图片描述

修改时间

在这里插入图片描述

本文来自网络，不代表协通编程立场，如若转载，请注明出处：https://www.net2asp.com/a8827b1bae.html

赞 (0)
« 上一篇 1天前
下一篇 » 1天前

相关推荐