首页 > 系统服务 > 详细

Ubuntu16.04Scrapy爬虫定时任务

时间:2018-04-20 17:38:03      阅读:188      评论:0      收藏:0      [点我收藏+]

1、书写shell脚本

#!/bin/sh

# 爬虫的目录
cd /home/x5456/SinaSpider
# scrapy要使用绝对路径(不知道的话用which scrapy命令获取)
/home/x5456/.local/bin/scrapy crawl sina(爬虫名)

2、使用crontab -e命令去编辑定时任务(第一次会让你选择使用的编辑器,最好选nano;如果选错了使用select-editor 命令重新选一下)

在下面填一行

41 16 * * * /home/x5456/SinaSpider/sinastart.sh  # 每天16点41分执行一次这个脚本

3、重启定时任务的服务(好像不重启也行)

sudo service cron restart

 

Ubuntu16.04Scrapy爬虫定时任务

原文:https://www.cnblogs.com/x54256/p/8892031.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!