码迷,mamicode.com
首页 > 其他好文 > 详细

Scarpy 命令行工具

时间:2019-04-30 11:03:37      阅读:148      评论:0      收藏:0      [点我收藏+]

标签:创建项目   raw   bsp   全局   class   master   enc   网址   fetch   

Scarpy 命令行工具

一、Scarpy 全局命令

  scrapy startproject project_name     (创建项目)

  scrapy crawl xx     (运行xxspider文件)

  scrapy shell http://www.scrapyd.cn    (调试网址为http:www.scrapyd.cn的网站),

  全局命令有如下几个:

startproject

genspider

settings

runspider

shell

fetch

view

version

二、Scarpy 项目命令

文件夹,按住shift,然后右键就会出现:在命令行打开

  1. crawl
  2. check
  3. list
  4. edit
  5. parse
  6. bench

1、crawl:运行蜘蛛

例:我们要运行name = scrapyd_cn的蜘蛛,我们可以这样:

scrapy crawl scrapyd_cn

2、check:检查蜘蛛

3、list:显示有多少个蜘蛛

这里的蜘蛛就是指spider文件夹下面xx.py文件中定义的name,你有10个py文件但是只有一个定义了蜘蛛的name,那只算一个蜘蛛,比如我们在:AoiSolas目录下运行这个命令:

scrapy list

得到的结果是:

F:\ScrapyProject\AoiSolas (master -> origin)
 # scrapy list
AoiSola

这就是它的使用方法,我们可以来看一下AoiSolas的文件结构:

Scarpy 命令行工具

标签:创建项目   raw   bsp   全局   class   master   enc   网址   fetch   

原文地址:https://www.cnblogs.com/guozepingboke/p/10794523.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!