标签:文件 bsp awl 设置 spider settings rap setting 强制退出
首先把爬虫写好后————》在同级文件夹新建一个文件夹(类似于日志)info————》接下来打开命令行cd到这个爬虫
————》输入命令:
scrapy crawl spider -s JOBDIR=info/001 开启
ctrl+c 暂停
注意不能按两次,两次是强制退出了,不是暂停了
暂停之后需要重启第一行命令:scrapy crawl spider -s JOBDIR=info/001
custom_settings = { "JOBDIR":"info/001" } 或者直接在settings上设置 "JOBDIR":"info/001"
尽量在命令行上做
标签:文件 bsp awl 设置 spider settings rap setting 强制退出
原文地址:https://www.cnblogs.com/ArtisticMonk/p/9741264.html