Scrapy在PyCharm里面运行，调试

时间：2018-04-05 13:25:01 阅读：821 评论：0 收藏：0 [点我收藏+]

首先通过csrapy shell命令创建一个scrapy项目。

scrapy startproject projectname

技术分享图片

会生成如下文件

技术分享图片

进入spider_405文件夹

技术分享图片

我们自己写的爬虫项目就放在spiders文件夹里面

items.py是用来保存你爬取的数据的数据结构

技术分享图片

在scrapy.cfg同目录下新建一个begin.py文件

技术分享图片

在begin.py中编辑内容如下，注意红框中是在spiders里面name的值

技术分享图片

之后调试程序时，运行begin.py文件即可，调试信息会在run框中打印输出

技术分享图片

原文地址：https://www.cnblogs.com/taoHongFei/p/8722037.html

踩

(0)

评论一句话评论（0）

分享档案

更多>

周排行