Kettle与Hadoop(八)执行Oozie作业

1. 打开PDI,新建一个作业,如图1所示。

图1

2. 编辑'Oozie job executor'作业项,如图2所示。

图2

        说明:

        /root/big_data/job.properties文件的内容如下:

nameNode=hdfs://manager:8020  
jobTracker=manager:8032  
queueName=default  
oozie.use.system.libpath=true  
oozie.wf.application.path=${nameNode}/user/${user.name}

        各属性的含义,以及工作流功能、工作流文件的创建参见“https://blog.csdn.net/wzy0623/article/details/51880687”。DAG如图3所示。

图3

3. 保存并执行作业,日志如下所示。

2020/06/09 09:48:43 - Spoon - Starting job...
2020/06/09 09:48:43 - Oozie - Start of job execution
2020/06/09 09:48:43 - Oozie - Starting entry [Oozie job executor]
2020/06/09 09:51:47 - Oozie - Finished job entry [Oozie job executor] (result=[true])
2020/06/09 09:51:47 - Oozie - Job execution finished
2020/06/09 09:51:47 - Spoon - Job has ended.

        在Oozie Web Console可以查看工作流执行进度和结果,如图4所示。

图4

        参考:Oozie Job Executor

©️2020 CSDN 皮肤主题: 深蓝海洋 设计师:CSDN官方博客 返回首页