Oozie的案例测试

文章目录


前言

开始前请确保已经配置好了oozie的环境,有关Oozie的安装配置问题请参照Oozie安装配置完整教程,安装好后我们用oozie自带的examples进行案例运行测试。

一、解压examples上传到HDFS

第一步,在安装目录下输入tar -zxvf oozie-examples.tar.gz解压到当前目录,之后会出现一个名为examples的文件夹里面放置了各种程序。

第二步,上传到HDFS上,/opt/cdh5.3.6/hadoop-2.5.0-cdh5.3.6/bin/hdfs dfs -put examples/ examples,进入前端可以看到:
Oozie的案例测试

二、更改配置

找到安装目录下的这个文件/examples/apps/map-reduce/job.properties并修改默认端口号:
Oozie的案例测试

一般情况下默认namenode端口号是8020,yarn的resourcemanager是8032,可以根据自己设置进行修改。

三、启动oozie案例

先启动好oozie和Hadoop,执行bin/oozie job -oozie http://localhost:11000/oozie -config examples/apps/map-reduce/job.properties -run
Oozie的案例测试
在Yarn的监控界面可以看到已经启动了两个MR任务,我们进入oozie的web界面查看:
Oozie的案例测试
已经启动了一个job,以上说明我们的oozie已经可以正常使用了。


总结

以上就是oozie的job测试过程,关于oozie的其他攻略欢迎大家访问我的主页翻阅。

上一篇:TensorFlow-Examples - helloworld.py


下一篇:torchtext 文档翻译