码迷,mamicode.com
首页 > 编程语言 > 详细

爬虫入门---Python2和Python3的不同

时间:2016-04-18 20:39:00      阅读:144      评论:0      收藏:0      [点我收藏+]

标签:

Python强大的功能使得在写爬虫的时候显得十分的简单,但是Python2和Python3在这方面有了很多区别。

本人刚入门爬虫,所以先写一点小的不同。

以爬取韩寒的一篇博客为例子:

在Python2.7中,我们往往这样写:

import urllib2
request=urllib2.Request("http://blog.sina.com.cn/s/blog_4701280b0102egl0.html")
response=urllib2.urlopen(requset)
print response.read()

但是在Python3中,这样做却行不通了,首先Python3将urllib和urllib2合并成了urllib

技术分享

而获取网络数据需要urllib.request模块。

其次,由于unicode会导致爬回来的中文乱码,因此需要用str()函数进行对乱码的修改。

因此在Python3中需要这样写:

import urllib.request
url=http://blog.sina.com.cn/s/blog_4701280b0102egl0.html
response=urllib.request.urlopen(url)
content=response.read()
print (str(content),utf-8)

 

爬虫入门---Python2和Python3的不同

标签:

原文地址:http://www.cnblogs.com/itdyb/p/5405708.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!