1. crond简介

crond 是linux下用来周期性的执行某种任务或等待处理某些事件的一个守护进程,与windows下的计划任务类似,当安装完成操作系统后,默认会安装此服务工具,并且会自动启动crond进程,crond进程每分钟会定期检查是否有要执行的任务,如果有要执行的任务,则自动执行该任务。

Linux下的任务调度分为两类,系统任务调度和用户任务调度。

crontab 时间格式如下:

minute hour day month week command

minute: 表示分钟,可以是从0到59之间的任何整数。

hour:表示小时,可以是从0到23之间的任何整数。

day:表示日期,可以是从1到31之间的任何整数。

month:表示月份,可以是从1到12之间的任何整数。

week:表示星期几,可以是从0到7之间的任何整数,这里的0或7代表星期日。

command:要执行的命令,可以是系统命令,也可以是自己编写的脚本文件。

还可以使用以下特殊字符:

星号(*):代表所有可能的值,例如month字段如果是星号,则表示在满足其它字段的制约条件后每月都执行该命令操作。

逗号(,):可以用逗号隔开的值指定一个列表范围,例如,“1,2,5,7,8,9”

中杠(-):可以用整数之间的中杠表示一个整数范围,例如“2-6”表示“2,3,4,5,6”

正斜线(/):可以用正斜线指定时间的间隔频率,例如“0-23/2”表示每两小时执行一次。同时正斜线可以和星号一起使用,例如*/10,如果用在minute字段,表示每十分钟执行一次。

  • 在线测试工具,很好用:

在线crontab表达式执行时间计算 - 码工具

2. crond服务

常用命令

crontab -e            #编辑某个用户的crontab文件内容。如果不指定用户,则表示编辑当前用户的crontab文件。

crontab -l             #显示某个用户的crontab文件内容,如果不指定用户,则表示显示当前用户的crontab文件内容。

crontab -r            #从/var/spool/cron目录中删除某个用户的crontab文件,如果不指定用户,则默认删除当前用户的crontab文件。

crontab -ir            #在删除用户的crontab文件时给确认提示。

crontab命令位置

/var/spool/cron

所有用户定义的crontab 文件都被保存在 /var/spool/cron目录中。其文件名与用户名一致。

使用实例

实例1:每1分钟执行一次command命令:
*/1 * * * *  command

若执行多个命令,用;分隔开 

*/1 * * * * source /etc/profile; sh /home/pentaho/pentaho-server/auto_monitor_server.sh
 

实例2:每小时的第3和第15分钟执行
命令:
3,15 * * * * command

实例3:在上午8点到11点的第3和第15分钟执行
命令:
3,15 8-11 * * * command

实例4:每隔两天的上午8点到11点的第3和第15分钟执行
命令:
3,15 8-11 */2 * * command

实例5:每个星期一的上午8点到11点的第3和第15分钟执行
命令:
3,15 8-11 * * 1 command

实例6:每月1、10、22日的4 : 45重启smb 
命令:
45 4 1,10,22 * * /etc/init.d/smb restart


实例7:每天18 : 00至23 : 00之间每隔30分钟重启smb 
命令:
0,30 18-23 * * * /etc/init.d/smb restart


实例8:晚上11点到早上7点之间,每隔一小时重启smb 
命令:
* 23-7/1 * * * /etc/init.d/smb restart

实例9:每月的4号且是周一到周三的11点重启smb 
命令:
0 11 4 * 1-3 /etc/init.d/smb restart

实例10:设置每两周的周末执行

10 0 8-14,22-28 * * if [ `date '+\%w'` = "0" ]; then sh  /root/test.sh;fi

需要增加判断语句来检测是否是周日,%是特殊字符需要加\

实例11:从第3分钟开始,每隔5分钟执行

3-59/3 * * * * 

3. 任务报错

  • 设置定时任务crontab时,任务执行报错如下:

sudo: sorry, you must have a tty to run sudo

原因 :

  导致这问题的原因是 sudo默认需要在 tty终端里才能正确被调用,我们可以通过修改 /etc/sudoers配置文件来解决这个问题:
  visudo /etc/sudoers
  注释掉 Default requiretty 一行

  这个问题也有可能发生在使用 crontab定制的任务计划里面需要调用 sudo命令的情况。

  • crontab中启动的shell脚本不能正常运行,但是使用手动执行没有问题 

      使用crontab设置spark任务定时执行,发现手动执行spark任务命令没问题,设置crontab时无响应。在脚本中添加环境变量解决问题,如下。

source /etc/profile
nohup spark2-submit  --class org.apache.spark.examples.SparkPi  --master yarn-cluster --deploy-mode cluster --num-executors 15 --driver-memory 8g --executor-memory 12g /opt/cloudera/parcels/SPARK2/lib/spark2/examples/jars/spark-examples_2.11-2.4.0.cloudera2.jar  100 > /home/spark/spark_log  2>&1

        出现这种shell脚本没有执行的问题时,多数都是环境变量设置和绝对路径的问题。因为cront进程不会自动加载用户目录下的.profile文件,所以在脚本第一行写上source /etc/profile。

       当spark命令运行时间较长时,使用kettle的ssh组件运行任务,datanode节点服务器会把该进程挂起,任务即使执行成功也无法返回状态,导致job作业一直显示running状态。给spark命令添加了nohup 参数后解决这个问题。nohup表示无挂起的shell命令。

 参考链接:Linux定时任务Crontab命令详解 - 那啥快看 - 博客园

 

Logo

旨在为数千万中国开发者提供一个无缝且高效的云端环境,以支持学习、使用和贡献开源项目。

更多推荐