当前位置:网站首页>Oozie工作调度
Oozie工作调度
2022-07-29 00:06:00 【我要用代码向我喜欢的女孩表白】
最常用的调度是crontab,然后spring是schedule.
而cdh平台里面的是oozie,可以在hue上操作,非常方便
Oozie架构

多个任务顺序执行
周期内重复执行
Oozie内容
action,单单指其中的一个任务,比如一个sh脚本
一个workflow里面有多个action
workflow(有向无环图)任务流,顺序执行
coordinator,定时任务,可以定时执行workflow
bundle, 将多个定时任务分为一组,批量执行coordinator
SLA 用于执行过程的日志分析
Oozie使用(等待补充)
1)workflow.xml 文件 -------这个文件必须放在HDFS上
start -> action(ok,error) -> kill -> end
2)job.properties 文件 --------必须要在本地
属性配置文件,参数提供给workflow.xml文件
3)lib目录 --------必须要在HDFS上
相关的依赖包全部放在lib目录
如果要修改了workflow.xml 文件和lib,就必须重新上传到HDFS,job.properties文件修改了可以不用上传,但必须放在本地目录下
查看日志
/opt/modules/oozie/logs/oozie.log
hue上操作oozie
边栏推荐
- DDD领域驱动设计如何进行工程化落地
- Seven marketing strategies of NFT project
- 递归与分治
- 进程和线程知识点总结 2
- 【unity】将unity编辑c#配置为vscode
- Spark 3.0 中七个必须知道的 SQL 性能优化
- B+ tree~
- Instruction rearrangement, happens before, as if serial
- Deep learning | matlab implementation of TCN time convolution neural network spatialdropoutlayer parameter description
- 消费行业数字化升级成“刚需”,weiit新零售SaaS为企业赋能!
猜你喜欢

NFT 项目的 7 种市场营销策略

Wechat campus bathroom reservation applet graduation design finished product (8) graduation design thesis template

What opportunities does the London gold real-time market bring?

时序预测 | MATLAB实现TCN时间卷积神经网络的时间序列预测

20220728-不纯为数字的字符串排序

面试官:程序员,请你告诉我是谁把公司面试题泄露给你的?

State compression DP Mondrian's dream

【目标检测】YOLOR理论简介+实践测试VisDrone数据集

消费行业数字化升级成“刚需”,weiit新零售SaaS为企业赋能!

散列表 ~
随机推荐
Method of converting inline elements to block elements
How to create a custom 404 error page in WordPress
Consumer unit
ACM SIGIR 2022 | interpretation of selected papers of meituan technical team
Daniel guild Games: summary and future outlook of this year
指令重排、happens-before、as-if-serial
ACM SIGIR 2022 | 美团技术团队精选论文解读
小程序毕设作品之微信校园浴室预约小程序毕业设计成品(7)中期检查报告
Charles -- 从0-1教你如何使用抓包工具
Instruction rearrangement, happens before, as if serial
dart数组,Map,类型判断,条件判断运算符,类型转换
Machine learning | matlab implementation of RBF radial basis function neural network Newrbe parameter setting
Hilbert 变换与瞬时频率
[Commons lang3 topic] 005- objectutils topic
TextKit 自定义UILabel识别链接
🧐 Table1 | finish your third line watch in one second
时序预测 | MATLAB实现TCN时间卷积神经网络的时间序列预测
Principle and usage setting of large page memory
Classification prediction | MATLAB realizes time series classification prediction of TCN time convolution neural network
Wechat campus bathroom reservation of small program completion work (6) opening defense ppt