Hadoop下的调度工具
Hadoop下的调度工具
制作Azkaban作业调度,包含job、Flow之间的依赖关系,并成功执行:
第一步:到相应的host4上su – Azkaban
第二步:建各个job.
第三步:根据需求先画出需求图:
Flow需求图:
整体需求图:
然后根据图片写job:
-----vi a.job
#a.job
type = command
command = echo “此时此刻的我想吟诗一首:念奴娇·赤壁怀古”
-----vi b.job
type = command
dependencies = a
command = echo “大江东去,浪淘尽,千古风流人物。”
-----vi c.job
type = command
dependencies = a
command = echo “故垒西边,人道是,三国周郎赤壁。”
-----vi d.job
type = command
dependencies = b
command = echo “乱石穿空,惊涛拍岸,卷起千堆雪。”
------vi e.job
type = command
dependencies = b
command = echo “江山如画,一时多少豪杰。”
-----vi f.job
type = command
dependencies = d,e
command = echo “遥想公瑾当年,小乔初嫁了(liǎo),雄姿英(yīng)发。”
-----vi g.job
type = command
dependencies =f,c
command = echo “羽扇纶(guān)巾,谈笑间,樯橹灰飞烟灭。”
------vi h.job
type = command
dependencies =g
command = echo “故国神游,多情应笑我,早生华(huā)发。人生如梦,一尊还酹(lèi)江月。”
把各个jiob做成zip格式:
把zip下载到桌面:
下载成功:
创建端口转接:
打开网页:
127.0.0.1:8081
先创建项目:
上传zip:
运行:
运行成功:
查看: