我们爬取数据的时候，经常会希望定时运行爬虫，一般在凌晨的时候执行，那样挂服务器上就会减轻很大的负荷，所以我们就需要定时的任务，本文使用了scrapy框架，然后定时执行爬虫代码的方法。 声明：此方法不一定是最好的方法，但是肯定是能达到效果的方法。 网上有很多的代码介绍，最多的就是下面的方法： import time from scrapy.cmdline import execute imp...
