码迷,mamicode.com
首页 > 其他好文 > 详细

一、爬虫环境

时间:2018-05-29 00:16:21      阅读:160      评论:0      收藏:0      [点我收藏+]

标签:figure   ber   版本   inux   3.4   ==   yum   sel   新版   

linux环境为例

 

安装python3

 

请求库

一、requests库

pipe install requests

注意:出现报错:pip is configured with locations that require TLS/SSL, however the ssl module in Python is not available.

安装以下俩库:

yum install openssl 

yum install openssl-devel

重新编译python3,python3默认没有支持ssl

cd Python-3.6.2

./configure --with-ssl

make

make install

 

二、selenium

pip3 install selenium==3.4.3(不跟版本默认安装最新版)

 

三、aiohttp

pip3 install aiohttp

 

解析库

一、lxml

pip3 install lxml

 

二、Beautiful Soup

pip3 install beautifulsoup4

 

三、pyquery

pip3 install pyquery

 

 

一、爬虫环境

标签:figure   ber   版本   inux   3.4   ==   yum   sel   新版   

原文地址:https://www.cnblogs.com/Mr-chenshuai/p/9102603.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!