图文详解crond定时任务

Posted 2020-09-08

第1章crontd的介绍

  1.1crond的含义

crond是linux下用来周期性的执行某种任务或等待处理某些事件的一个守护进程，与windows下的计划任务类似，当安装完成操作系统后，默认会安装此服务工具，并且会自动启动crond进程，crond进程每分钟会定期检查是否有要执行的任务，如果有要执行的任务，则自动执行该任务。

1.2关于任务调度的分类

Linux下的任务调度分为两类，系统任务调度和用户任务调度。

1.系统任务调度：系统周期性所要执行的工作，比如写缓存数据到硬盘、日志清理等。在/etc目录下有一个crontab文件，这个就是系统任务调度的配置文件。

/etc/crontab文件包括下面几行：

[[email protected] ~]# cat /etc/crontab 

SHELL=/bin/bash

PATH=/sbin:/bin:/usr/sbin:/usr/bin

MAILTO=""HOME=/

# run-parts

51 * * * * root run-parts /etc/cron.hourly

24 7 * * * root run-parts /etc/cron.daily

22 4 * * 0 root run-parts /etc/cron.weekly

42 4 1 * * root run-parts /etc/cron.monthly

前四行是用来配置crond任务运行的环境变量，第一行SHELL变量指定了系统要使用哪个shell，这里是bash，第二行PATH变量指定了系统执行命令的路径，第三行MAILTO变量指定了crond的任务执行信息将通过电子邮件发送给root用户，如果MAILTO变量的值为空，则表示不发送任务执行信息给用户，第四行的HOME变量指定了在执行命令或者脚本时使用的主目录。第六至九行表示的含义将在下个小节详细讲述。这里不在多说。

2.用户任务调度：用户定期要执行的工作，比如用户数据备份、定时邮件提醒等。用户可以使用 crontab 工具来定制自己的计划任务。所有用户定义的crontab 文件都被保存在 /var/spool/cron目录中。其文件名与用户名一致。

1.3使用者权限文件：

文件：/etc/cron.deny

说明：该文件中所列普通用户不允许使用crontab命令

文件：/etc/cron.allow

说明：该文件中所列用户允许使用crontab命令

文件：/var/spool/cron/

说明：所有用户crontab文件存放的目录,以用户名命名

1.4 crontab文件的含义：

用户所建立的crontab文件中，每一行都代表一项任务，每行的每个字段代表一项设置，它的格式共分为六个字段，前五段是时间设定段，第六段是要执行的命令段，格式如下：

minute   hour   day   month   week   command

其中：

minute： 表示分钟，可以是从0到59之间的任何整数。

hour：表示小时，可以是从0到23之间的任何整数。

day：表示日期，可以是从1到31之间的任何整数。

month：表示月份，可以是从1到12之间的任何整数。

week：表示星期几，可以是从0到7之间的任何整数这里的0或7代表星期日。command：要执行的命令，可以是系统命令，也可以是自己编写的脚本文件。

用表格说明：如下

第2章 关于crond服务

2.1安装crontab：

yum install crontabs

服务操作说明：

/sbin/service crond start //启动服务

/sbin/service crond stop //关闭服务

/sbin/service crond restart //重启服务

/sbin/service crond reload //重新载入配置

查看crontab服务状态：service crond status

手动启动crontab服务：service crond start

查看crontab服务是否已设置为开机启动，执行命令：ntsysv

加入开机自动启动：chkconfig –level 35 crond on

2.2 crontab命令详解

1.命令格式：

crontab [-u user] file

crontab [-u user] [ -e | -l | -r ]

2．命令功能：

通过crontab 命令，我们可以在固定的间隔时间执行指定的系统指令或 shell script脚本。时间间隔的单位可以是分钟、小时、日、月、周及以上的任意组合。这个命令非常设合周期性的日志分析或数据备份等工作。

3．命令参数：

-u user：用来设定某个用户的crontab服务，例如，“-u ixdba”表示设定ixdba用户的crontab服务，此参数一般有root用户来运行。

file：file是命令文件的名字,表示将file做为crontab的任务列表文件并载入crontab。如果在命令行中没有指定这个文件，crontab命令将接受标准输入（键盘）上键入的命令，并将它们载入crontab。

-e：编辑某个用户的crontab文件内容。如果不指定用户，则表示编辑当前用户的crontab文件。

-l：显示某个用户的crontab文件内容，如果不指定用户，则表示显示当前用户的crontab文件内容。

-r：从/var/spool/cron目录中删除某个用户的crontab文件，如果不指定用户，则默认删除当前用户的crontab文件。

-i：在删除用户的crontab文件时给确认提示。

例：为了防止计划任务被删除，写一个shell每天备份一次 

mkdir -p /home/enrnd/crontab_bak 创建目录

 touch  crontab_bak.sh  创建文件

打开 crontab_bak.sh,添加内容

  crontab –l > /home/enrnd/crontab_bak/crontab`date ‘+%Y%m%d’`.txt

创建计划任务

crontab -e ,添加如下内容

0 9 * * * /home/enrnd/crontab_bak/crontab_bak.sh

2.3定时任务的种类：

1.crontab:这个命令可以周期性的执行任务工作，例如：每五分钟做一次服务器时间同步。要执行crontab这个命令，也需要启动一个服务crond才可以，这个crontab命令是在生产工作中最常用到的命令

2.anacron:这个命令主要用于非7*24小时开机的服务器准备的，anacron并不能指定具体时间执行任务工作，而是以天为周期或者在系统每次开机后执行的任务工作，它会检测服务器停机期间应该执行，但并没有进行的任务工作，并将该命令执行一遍

3.at:适合仅执行一次就结束的调度任务命令，例如：某天晚上需要处理一个任务，仅仅是这一天的晚上，属于突发性的工作任务，要执行at命令，还需要启动一个名为atd的服务才行，工作中很少使用

注：1.我们说的crond服务是运行的程序，而crontab命令用户用来设置定时规则的命令

        2.crond服务是企业生产工作中常用的重要服务

        3.几乎每个服务器都会用到crond服务

4.系统自动轮询任务的设置配置路径：

ls -l /etc/|grep cron

cd /etc/logrotate.d  把用户创建的定时任务放在此目录下

例：每5分钟让risesmbserver和域服务器的时候做同步

*/5 * * * * /usr/sbin/ntpdate 192.168.0.37 > /dev/null 2>&1

有些运维会把定时任务放在 /etc/crontab目录下，不支持放在此目录下

crontab 编辑的定时任务依赖的服务

chkconfig --list crond 查看是否开机启动

/etc/init.d/crond status   查看服务有没有运行

ps -ef |grep crond|grep -v grep

2.4.举例说明参数的使用说明

例：如何在指定的用户下执行crontab命令

 useradd rise  #新建rise用户

 cd -

 crontab -u rise -e #可以编辑文件

2.5.crontab语法格式中特殊符号含义如下并举例说明：

特殊符号：

*：星号，表示任意时间都，实际就是每的意思，例如00 23 * * * cmd表示每月每周每日的23：00都执行cmd任务。如果位上是*就是该位上时间的取值范围，如小时上的*等同于00-23，分上的*等同于00-59

注：定时任务规则如果到小时，口述时就最多提每天

-：减号，表示分隔符，表示一个时间范围，区间段，

如每天的17，18，19点的00分执行任务，00 17-19 * * * cmd

，：逗号，表示分隔时段的意思。

例：每天17，18，19点的半点执行一个rise.sh的脚本命令

30 17,18,19 * * * /bin/sh/scripts/rise.sh

/n:n代表数字，即每隔n单位时间

例：每10分钟执行一次任务

*/10 * * * * cmd

例：每6小时的半刻运行这个命令

30 */6 * * * cmd                

30 00-23/6 * * * cmd

2.5 关于crontab的一些实例

例1：每天早点8点到18点，每二小时的半刻运行这个命令

30 8-18/2 * * * cmd

例2：每月的1,10,22号的4点45分重启smb服务器

45 4 1,10,22 * * /etc/init.d/smb restart

例3：晚上23点和早上0点到7点，每隔一小时重新启动smb

00 23,00-07/1 * * * /etc/init.d/smb restart 

例4：4月的周一到周三11点重启服务

00 11 * 4 1-3 /etc/init.d/smb restart

例5：制定一个计划任务输出时间，让他每15分钟运行一次

00,15,30,45,08-18 * * * date

例6：每小时的第3和第15分钟执行

3,15 * * * * command

例7：在上午8点到11点的第3和第15分钟执行

3,15 8-11 * * * command

例8：每隔两天的上午8点到11点的第3和第15分钟执行

3,15 8-11 */2 * * command

例9：每个星期一的上午8点到11点的第3和第15分钟执行

3,15 8-11 * * 1 command

例10：每晚的21:30重启smb 

30 21 * * * /etc/init.d/smb restart

例11：每月1、10、22日的4 : 45重启smb 

45 4 1,10,22 * * /etc/init.d/smb restart

例12：每周六、周日的1 : 10重启smb

10 1 * * 6,0 /etc/init.d/smb restart

例13：每天18 : 00至23 : 00之间每隔30分钟重启smb 

00,30 18-23 * * * /etc/init.d/smb restart

例14：每星期六的晚上11 : 00 pm重启smb 

00 23 * * 6 /etc/init.d/smb restart

例15：每一小时重启smb 

00 */1 * * * /etc/init.d/smb restart

例16：晚上11点到早上7点之间，每隔一小时重启smb 

00 23-7/1 * * * /etc/init.d/smb restart

例17：每月的4号与每周一到周三的11点重启smb

00 11 4 * mon-wed /etc/init.d/smb restart

例18：一月一号的4点重启smb 

00 4 1 * * /etc/init.d/smb restart

例19：每小时执行/etc/cron.hourly目录内的脚本

01   *   *   *   *     root run-parts /etc/cron.hourly

说明：

run-parts这个参数了，如果去掉这个参数的话，后面就可以写要运行的某个脚本名，而不是目录名了

第3章：企业生产环境中的crontab的使用原则

3.1 生产环境下定时任务的专业写法说明

  1：为定时任务规则加必要的注释,写任务时任务规则尽可能的加上注释（最好是英文注释），这是个习惯和规范。最好是什么时间什么人，因为什么事写的定时任务，这样是为了让其他的运维人员可以很容易理解任务的信息，从而提高了工作效率

  2：执行定时任务时，如果是执行脚本，请尽量在脚本的签名加上/bin/sh命令，否则有可能忘了为脚本设定执行权限，导致任务无法运行

  3：首先在命令行操作成功，然后复制命令到脚本里，在各个细小环节减少出错的机会

  4：然后测试脚本，测试成功后，复制脚本的规范路径到定时任务配置里，不要手敲

  5：先在测试环境下测试，然后正式环境规范部署

3.2书写定时任务的写法说明

总结：1.为定时任务规则加必要的注释

          2.定时任务命令或程序最好写到脚本里执行

          3.执行shell脚本任务前加/bin/sh

           4.定时任务命令或脚本结尾加>/dev/null 2&1

           5.在指定用户下执行相关的定时任务

           6.生成任务程序不要随意打印输出信息

               tar打包的时候尽量减少使用v，这样就会减少垃圾

           7.定时任务执行的脚本要规范路径（绝对路径）

           8.配置定时任务规范操作过程

注：1.定时任务能不用root就不要在root下操作

2.>/dev/null 2&1问题

sendmail

/var/spool/clientmqyeue  -----邮件的临时队列目录，会产生N个小文件，导致的后果就是把磁盘的inode满

postfix

/var/spool/postfix/maildrop/ 小文件太多造成inode索引使用完解决办法

df -i 可以查看inode使用是否满

3.3工作中调试定时任务的方法：

1.增加执行任务频率调试任务（某些任务不能用于生产环境没有测试机会）

        代码发布：个人开发环境---办公测试环境----IDC机房测试环境----IDC正式环境（分组，灰度发布）

2.调整系统时间调试任务（不能直接用于生产环境），保持提前5分钟

3.通过脚本日志输出调试定时任务

4.注意一些任务命令带来的问题

5.注意环境变量导致的定时任务故障（java）

6.通过crond定时任务日志调试定时任务（/var/log/cron）

7.其他的问题调试的办法

3.4 crontab定时任务生产应用问题的8箴言

1.系统环境变量问题

   crontab执行shell时只能识别位数不多的系统环境变量，一般用户定义的普通变量无法识别，如果在编写的脚本需要使用这些变量，最好使用export重新申明下该变量脚本才能正常执行。例如：生产情况和Java相关的脚本任务和脚本

2.定时任务要用绝对路径

     执行shell，如果使用相对路径，可能出现找不到任务路径的情况

 3.脚本权限问题加/bin/sh

4.事件变量问题用反斜线\%转义，最好用脚本

5.>/dev/null 2>&1问题

6.定时任务规则之前加注释

7.使用脚本程序替代命令行定时任务

8.避免不必要的程序及命令输出

9.切换到目标目录的上一级打包目标

10.定时任务脚本中的程序命令尽量要用全路径（和环境变量的识别有关）

3.5关于crontab企业环境下作业题的分析

作业1：每分钟打印一次自己的名字拼音全拼到/server/log自己的名字命名的文件

mkdir -p /server/log/

touch /server/log/lizheng

#print log at 20170401 by lizheng for...

* * * * * echo lizheng >> /server/log/lizheng

作业总结：1.定时任务不要加注释

                 2.结尾不要有>/dev/null 2>&1（定向到空）

                3./server/log目录必须要存在才能出结果

                  4.定时任务中的路径一定要绝对路径

                  5.crond服务必须开启才能运行

企业面试题：

1.在每周6的凌晨3:15执行/home/shell/collect.pl，并将标准输出和错误输出到/dev/null设备，请写出crontab中的语句

思路：1.命令行先运行此命令

      2.把命令写入脚本内

      3.测试脚本的运行

      4.创建定时任务把脚本复制到crontab里

vim /server/scripts/execute.sh

#写入命令行

perl /home/shell/collect.pl

/usr/bin/perl /serer/scripts/exectue.sh

crontab -e

15 03 * * 6 /usr/bin/perl /serer/scripts/exectue.sh > /dev/null 2>&1

2.crontab在11月份内，每天的早上6点到12点钟，每隔2小时执行一次/usr/bin/httpd.sh怎么实现

思路：1.命令行先运行此命令

      2.把命令写入脚本内

      3.测试脚本的运行

      4.创建定时任务把脚本复制到crontab里

写入命令行

Vim /usr/bin/httpd.sh

bin/sh /usr/bin/httpd.sh

crontab -e

00 06-12/2 * 11 * /bin/sh /usr/bin/httpd.sh > /dev/null 2>&1

附录：crontab书写和排错流程的图文详解