码迷,mamicode.com
首页 > 其他好文 > 详细

多个scrapy 任务串联执行

时间:2020-07-01 17:34:35      阅读:56      评论:0      收藏:0      [点我收藏+]

标签:sys   system   执行   line   定义   运行时间   ide   time   port   

from scrapy.cmdline import execute
import sys
import os
import time


def run():
    # 根据业务需求自定义设置每个任务运行时间,CLOSESPIDER_TIMEOUT
    # while 1:
    print(111)
    os.system("scrapy crawl zhaoliangji_ttl")
    print(222)
    os.system("scrapy crawl zhaoliangji_sales")
    print(333)
    # os.system("scrapy crawl py3 -s CLOSESPIDER_TIMEOUT=1200")

run()

 

多个scrapy 任务串联执行

标签:sys   system   执行   line   定义   运行时间   ide   time   port   

原文地址:https://www.cnblogs.com/du-jun/p/13220260.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!