码迷,mamicode.com
首页 > 其他好文 > 详细

Scrapy: 初识Scrapy

时间:2018-03-21 13:54:03      阅读:114      评论:0      收藏:0      [点我收藏+]

标签:pos   网站   class   bsp   scapy   程序   获取   信息   cap   

1.初识Scrapy

Scrapy是为了爬取网站数据,提取结构性数据而编写的应用框架。可以应用在包括数据挖掘,信息处理或者存储历史数据等一系列的程序中。

2.选择一个网站

当需要从某个网站获取信息时,但该网站未提供API或者能通过程序获取信息的机制时,Scapy可以助你一臂之力。

3.定义想抓去的数据

在Scrapy中,通过Scrapy Items来完成的

import scrapy

class TorrentItem

 

Scrapy: 初识Scrapy

标签:pos   网站   class   bsp   scapy   程序   获取   信息   cap   

原文地址:https://www.cnblogs.com/baxianhua/p/8616078.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!