海牛部落 oozie 系列教程(三十五):Linux 的 crontab 和 oozie 的 cronschedule

教程 青牛 ⋅ 于 2017-09-29 11:21:16 ⋅ 最后回复由 陈崴 2024-06-30 09:40:20 ⋅ 15558 阅读

1.linux的crontab

cron不停地检查所有配置的任务在当前是否应该运行,任务运行的最小时间间隔是1分钟,也就是说任务最频繁只能每分钟运行一次。

(1).crontab命令选项
crontab -u <-l, -r, -e>
-u:指定一个用户
-l:列出某个用户的任务计划
-r:删除某个用户的任务
-e:编辑某个用户的任务

file
(2).cron文件语法与写法
可用crontab -e命令来编辑,编辑的是/var/spool/cron下对应用户的cron文件,也可以直接修改/etc/crontab文件。具体格式如下:
Minute Hour Day Month Week command
分钟 小时 天 月 星期 命令
0-59 0-23 1-31 1-12 0-6 command

每个字段代表的含义如下:

Minute, 每个小时的第几分钟执行该任务
Hour,每天的第几个小时执行该任务
Day,每月的第几天执行该任务
Month,每年的第几个月执行该任务
DayOfWeek,每周的第几天执行该任务,0表示周日
Command,指定要执行的程序 、脚本或命令
在这些字段里,除了“Command”是必须指定的字段以外,其它字段皆为可选。对于不指定的字段,要用“”来填补其位置。
例如:
          command
分 时  日  月  周  命令

(3).几个特殊符号的含义

“*”代表取值范围内的数字,
“/”代表”每”,
“-”代表从某个数字到某个数字,
“,”分开几个离散的数字

(4). 关于cron配置文件/etc/crontab
cron 的主配置文件是 /etc/crontab

file
前三行是用来配置 cron 任务运行环境的变量:
Shell 变量的值指定shell 环境(此处默认为 bash shell);PATH 变量定义用来执行命令的程序路径;cron 任务的输出被邮寄给 MAILTO 变量定义的用户名,如果 MAILTO 变量被定义为空白字符串(MAILTO=""),电子邮件就不会被寄出;

每次编辑完某个用户的cron设置后,cron自动在/var/spool/cron下生成一个与此用户同名的文件,此用户的cron信息都记录在这个文件中,这个文件是不可以直接编辑的,只可以用crontab -e 来编辑。cron启动后每过一份钟读一次这个文件,检查是否要执行里面的命令。因此此文件修改后不需要重新启动cron服务。

(5).常见cron示例参考

5 ls
指定每小时的第5分钟执行一次ls命令

30 5 * ls
指定每天的 5:30 执行ls命令

30 7 8 ls
指定每月8号的7:30分执行ls命令

30 5 8 6 * ls
指定每年的6月8日5:30执行ls命令

30 6 0 ls
指定每星期日的6:30执行ls命令
[注:0表示星期天,1表示星期1,以此类推,也可以用英文来表示,sun表示星期天,mon表示星期一等。]

30 3 10,20
ls 每月10号及20号的3:30执行ls命令
[注:“,”用来连接多个不连续的时段]

25 8-11 * ls
每天8-11点的第25分钟执行ls命令
[注:“-”用来连接连续的时段]

/15 * ls
每15分钟执行一次ls命令 [即每个小时的第0 15 30 45 60分钟执行ls命令 ]

30 6 /10 * ls
每个月中,每隔10天6:30执行一次ls命令[即每月的1、11、21、31日是的6:30执行一次ls命令 ]

50 7 * root run-parts /etc/cron.daily
每天7:50以root 身份执行/etc/cron.daily目录中的所有可执行文件
[ 注:run-parts参数表示,执行后面目录中的所有可执行文件

10,20,30 echo "第10、20、30分钟输出一次" >> /tmp/cron1.txt
第10、20、30分钟输出到/tmp/cron1.txt:

0 /2 lzw.me /usr/bin/somecommand >> /dev/null 2>&1
以用户lzw.me的身份每两小时就运行某个程序:

(6).启动或关闭
由于Cron 是linux的内置服务,可以用以下的方法启动、关闭这个服务:
service crond start //启动服务
service crond stop //关闭服务
service crond restart //重启服务
service crond reload //重新载入配置

(7).cron任务文件
cron 会从如下这些地方读取安装的任务:

/etc/anacrontab
这个文件存着系统级的任务。它主要用来运行每日的(daily),每周的(weekly),每月的(monthly)的任务。一般不在此文件安装自己的任务

/etc/cron.d/
此目录下存放的是系统级任务的任务文件。

/var/spool/cron/
此目录下存放各个用户的任务文件。各个用户的任务存放在以自已用户名为文件名的任务文件中。此文件中的指令行没有用户域。

新任务安装后或任务修改后不需要重启cron进程即可生效。

(8).日志文件
可以通过查看文件/var/log/cron查看任务的运行情况。

file

2.oozie cron

coordinator.xml在hdfs上的路径

oozie.coord.application.path=${nameNode}/work/coordinator.xml

定时任务的开始时间 以UTC时区为准

start=2016-11-03T09:00Z

定时任务的结束时间

end=2019-07-30T16:00Z

coordinator.xml

回复帖子,然后刷新页面即可查看隐藏内容

版权声明:原创作品,允许转载,转载时务必以超链接的形式表明出处和作者信息。否则将追究法律责任。来自海汼部落-青牛,http://hainiubl.com/topics/188
点赞
成为第一个点赞的人吧 :bowtie:
回复数量: 41
暂无评论~~
  • 请注意单词拼写,以及中英文排版,参考此页
  • 支持 Markdown 格式, **粗体**、~~删除线~~、`单行代码`, 更多语法请见这里 Markdown 语法
  • 支持表情,可用Emoji的自动补全, 在输入的时候只需要 ":" 就可以自动提示了 :metal: :point_right: 表情列表 :star: :sparkles:
  • 上传图片, 支持拖拽和剪切板黏贴上传, 格式限制 - jpg, png, gif,教程
  • 发布框支持本地存储功能,会在内容变更时保存,「提交」按钮点击时清空
Ctrl+Enter