标签：
1.Scrapy介绍
Scrapy，Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。
Scrapy吸引人的地方在于它是一个框架，任何人都可以根据需求方便的修改。它也提供了多种类型爬虫的基类，如BaseSpider、sitemap爬虫等。
2.Scrapy安装(http://www.cnblogs.com/txw1958/archive/2012/07/12/scrapy_installation_introduce.html)
1)安装libxml2：
官方主页：http://users.skynet.be/sbi/libxml-python/http://pypi.python.org/pypi/pyOpenSSL
下载地址：http://users.skynet.be/sbi/libxml-python/binaries/libxml2-python-2.7.7.win32-py2.7.exe
2) 安装Zope.Interface
官方主页：http://pypi.python.org/pypi/zope.interface/
下载地址：http://pypi.python.org/packages/2.7/z/zope.interface/zope.interface-4.0.1-py2.7-win32.egg
3) 安装Twisted
官方主页：http://twistedmatrix.com/trac/wiki/TwistedProject
下载地址：http://pypi.python.org/packages/2.7/T/Twisted/Twisted-12.1.0.win32-py2.7.msi
输入命令：pip install scrapy
4) 安装pyOpenSSL
官方主页：http://pypi.python.org/pypi/pyOpenSSL
下载地址：http://pypi.python.org/packages/2.7/p/pyOpenSSL/pyOpenSSL-0.13.winxp32-py2.7.msi
5)安装pywin32
下载地址：https://sourceforge.net/projects/pywin32/files/pywin32/
6)安装Scrapy
官方主页：http://scrapy.org/
下载地址：http://pypi.python.org/packages/source/S/Scrapy/Scrapy-0.14.4.tar.gz
标签：
原文地址：http://www.cnblogs.com/cnki/p/5698444.html
