Hadoop用户启动hdf三个进程
作者:互联网
再上次的课程中我们配置了root用户来启动了hdfs,hdfs-site.xml内的参数都是官方默认的参数,
所以启动项没有整理比较乱,为了做生产标准统一规范使用,我要用hadoop用户启动hdfs进程的启动
显示全部为hadoop-01的主机名,先看看root用户下启动的情况
可以看到namenodes datanode sercondary namenodes 进程启动的名称都不相同,
接下来会详细描述整个过程。
详细的修改步骤:
启动的三个进程:
namenode: hadoop-01 bin/hdfs getconf -namenodes
datanode: localhost datanodes (using default slaves file) etc/hadoop/slaves
secondarynamenode: 0.0.0.0
[hadoop@hadoop-01 ~]# cd/opt/software/hadoop
[hadoop@hadoop-01 hadoop]# echo "hadoop-01" > ./etc/hadoop/slaves
[hadoop@hadoop-01 hadoop]# cat./etc/hadoop/slaves
hadoop-01
[hadoop@hadoop-01 hadoop]# vi./etc/hadoop/hdfs-site.xml
<property>
<name>dfs.namenode.secondary.http-address</name>
<value>hadoop-01:50090</value>
</property>
<property>
<name>dfs.namenode.secondary.https-address</name>
<value>hadoop-01:50091</value>
</property>
# 重启
[hadoop@hadoop-01 hadoop]#sbin/stop-dfs.sh
[hadoop@hadoop-01 hadoop]#sbin/start-dfs.sh
关于步骤做一个详细的解析:
namenode : hadoop-01
datnaode : localhost
seondarynamenode : 0.0.0.0
对于这三个进程我们要查看如何修改这些参数
1. namenode 他读取的文件是 core-site.xml,所以我们要对这个文件进行修改
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://hadoop-01:9000</value>
</property>
</configuration>
namenode进程启动就改为了hadoopp-01
[hadoop@hadoop-01 hadoop-2.8.1]$ cat/etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4localhost4.localdomain4
::1 localhost localhost.localdomain localhost6localhost6.localdomain6
192.168.137.30 hadoop-01 (查看了我们的机器名已经配置了相关的ip地址信息了)
需要查看hdfs启动这三个进程究竟是一个怎样的过程,它写的是一个shell脚本
cat sbin/start-dfs.sh
如下图:
文件显示namenodes on 就等于 [root@hadoop-01 hadoop-2.8.1]$ sbin/start-dfs.sh
Starting namenodes on [localhost],所以启动的是本地的机器名
2.datenode调用的是 slaves file文件
查找下slaves用的是什么,发现是localhost,我们要对其进行修改
覆盖slaves文件,让它变成hadoop-01
3.seondarynamenode 查看shell信息
我们通过命令查看相应的结果:
打开官网查看官网给出的信息
http://hadoop.apache.org/docs/r2.8.3/hadoop-project-dist/hadoop-common/SingleCluster.html
把网站信息往下拉,可以看到下图,点击 hdfs-default.xml
再上节课中我们的hdfs-deault.xml使用的是默认的配置
然后 Ctrl + F 查找 secondary ,第一个就是我们所需要的信息
这里的htpps,带安全认证的意思
把以下的信息进行替换到原来的hdf-site.xml
dfs.namenode.secondary.http-address 0.0.0.0:50090
dfs.namenode.secondary.https-address 0.0.0.0:50091
按课程需求将0.0.0.0 替换成 hadoop-01
按颜色进行替换:
实战替换的结果:
需要自行调整排序
4.查看是否都是以hadoop-01启动停止:
结果没有任何报错,正常
标签:hdfs,01,用户,0.0,hadoop,Hadoop,hdf,namenode,localhost 来源: https://blog.csdn.net/weixin_42544115/article/details/96120605