Azkaban使用流程
访问:
公共组件的Azkaban目前部署在l-job1.ppt.cn2服务器上,可以直接通过http://l-azkaban1.ppt.cn2.qunar.com:8081/index来进行访问
账号密码:
账号和密码都为azkaban,之后可能接入LDAP
创建工程:
点击右上角的Create Project 并输入工程名和描述来创建工程,通常一个任务建一个project。
上传Job:
点击进入project后,点击右上角的Upload上传任务,格式必须是zip
Job格式:
job文件必须以.job为后缀,并且zip压缩后上传
Command类型单一job示例
1、创建job描述文件
vi command.job
#command.job type=command command=echo 'hello' |
2、将job资源文件打包成zip文件
zip command.job
3、上传job,见上一步
4、执行Job
Command类型多job工作流flow
1、创建有依赖关系的多个job描述
第一个job:foo.job
# foo.job
type=command
command=echo foo
第二个job:bar.job依赖foo.job
# bar.job
type=command
dependencies=foo
command=echo bar
2、将所有job资源文件打到一个zip包中
3、在azkaban的web管理界面创建工程并上传zip包
4、启动工作流flow
Command类型远程job工作流flow
1、创建job
type=command
command=ssh [email protected] "sh /home/q/data/dailylocationrsync.sh"#ssh到远程服务器执行脚本,必须有脚本中涉及的目录的权限
2、打成zip
3、执行job
定时任务:
可以指定任务执行的时间,指定方式为cron表达式