Crontab爬虫定时执行

Posted nuochengze

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Crontab爬虫定时执行相关的知识,希望对你有一定的参考价值。

安装:`apt-get install cron`(服务器环境下默认安装的有)

使用:`crontab -e`进入编辑页面(第一次会让你选择编辑器)

   `crontab -l`查看当前的定时任务

编辑:

  分  小时  日  月  星期  命令

  0-59 0-23  1-31 1-12 0-6  command

例子:

  30  7  8  *  *  ls  指定每月8号的7:30分执行ls命令

  */15 *  *  *  *  ls  每15分钟执行一次ls命令

  0  */2  *  *  *  ls  每隔两个小时执行一次ls

注意点:

  (1)星期中0表示周日

  (2)每隔两个小时的时候,前面不能为*,为*表示每分钟都会执行

执行Python程序的方式:

技术图片

 

实时输出run.log的方式:

  `tail -f run.log`   作用是,当run.log中没有内容输入时,会卡着不动,直到有内容写入,然后它会打印在屏幕上。

 

以上是关于Crontab爬虫定时执行的主要内容,如果未能解决你的问题,请参考以下文章

Crontab爬虫定时执行

Crontab爬虫定时执行

crontab定时任务执行scrapyd爬虫

定时执行以及脚本监听

linux下使用crontab定时执行脚本

crontab内环境变量问题(crontab定时任务执行脚本异常)