码迷,mamicode.com
首页 > 其他好文 > 详细

Scrapy框架

时间:2019-05-27 19:24:58      阅读:101      评论:0      收藏:0      [点我收藏+]

标签:back   --   mamicode   http   监测   创建   出现   sof   ike   

一 简介

  Scrapy,Python开发的一个快速、高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试

 

安装scrapy

使用pip进行安装

运行cmd命令进入终端

执行命令:pip install Scrapy

技术图片

安装Scrapy一般会出现下面的错误

技术图片

次提示系统没有Microsoft Visual C++ 14.0,需要先安装

Microsoft Visual C++ 14.0 提取码:lubx

安装好之后再次执行pip install Scrapy命令即可

 

使用 Scrapy

1、使用终端进入到需要创建项目的路径下

这里我在F盘创建

2、输入scrapy startproject 项目名称  进行项目创建

技术图片

 

 

 

Scrapy框架

标签:back   --   mamicode   http   监测   创建   出现   sof   ike   

原文地址:https://www.cnblogs.com/renshaoqi/p/10932413.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!