Oozie的案例测试
作者:互联网
文章目录
前言
开始前请确保已经配置好了oozie的环境,有关Oozie的安装配置问题请参照Oozie安装配置完整教程,安装好后我们用oozie自带的examples进行案例运行测试。
一、解压examples上传到HDFS
第一步,在安装目录下输入tar -zxvf oozie-examples.tar.gz
解压到当前目录,之后会出现一个名为examples的文件夹里面放置了各种程序。
第二步,上传到HDFS上,/opt/cdh5.3.6/hadoop-2.5.0-cdh5.3.6/bin/hdfs dfs -put examples/ examples
,进入前端可以看到:
二、更改配置
找到安装目录下的这个文件/examples/apps/map-reduce/job.properties
并修改默认端口号:
一般情况下默认namenode端口号是8020,yarn的resourcemanager是8032,可以根据自己设置进行修改。
三、启动oozie案例
先启动好oozie和Hadoop,执行bin/oozie job -oozie http://localhost:11000/oozie -config examples/apps/map-reduce/job.properties -run
在Yarn的监控界面可以看到已经启动了两个MR任务,我们进入oozie的web界面查看:
已经启动了一个job,以上说明我们的oozie已经可以正常使用了。
总结
以上就是oozie的job测试过程,关于oozie的其他攻略欢迎大家访问我的主页翻阅。
标签:解压,HDFS,Oozie,案例,job,examples,测试,oozie 来源: https://blog.csdn.net/weixin_41209740/article/details/111461188