码迷,mamicode.com
首页 >  
搜索关键字:urlopen    ( 699个结果
爬虫-urllib的使用(2)
import urllib.request import json # 接收一个字符串作为参数 r = urllib.request.urlopen('http://httpbin.org/get') # 读取response的内容 text = r.read() print(text) # htt ...
分类:Web程序   时间:2020-07-10 00:21:22    阅读次数:70
1闭包
from urllib.request import urlopen def get_url(): url = "http" def get(): ret = urlopen(url).read() print(ret) return get get_func = get_url() get_fun ...
分类:其他好文   时间:2020-07-05 13:29:37    阅读次数:44
网页信息数据-数据分析(6)
import urllib.request; from bs4 import BeautifulSoup; response = urllib.request.urlopen("file:///C:/Users/junwei_zhou/Desktop/502/6.1/html.html"); htm ...
分类:Web程序   时间:2020-07-04 22:31:21    阅读次数:78
python网络爬虫从入门到实战开发
1、简单的抓取网页 from urllib import requestreq=request.Request("http://www.baidu.com")response=request.urlopen(req)html=response.read()html=html.decode("utf- ...
分类:编程语言   时间:2020-06-26 21:59:22    阅读次数:62
urlopen函数
https://www.cnblogs.com/zyq-blog/p/5606760.html 一. 简介 urllib.request.urlopen()函数用于实现对目标url的访问。 函数原型如下:urllib.request.urlopen(url, data=None, [timeout, ...
分类:Web程序   时间:2020-06-24 21:31:38    阅读次数:235
Python爬虫实战之如何爬取百度贴吧帖子?案例详解
大家好,上次我们实验了爬取了糗事百科的段子,那么这次我们来尝试一下爬取百度贴吧的帖子。与上一篇不同的是,这次我们需要用到文件的相关操作。 前言 亲爱的们,教程比较旧了,百度贴吧页面可能改版,可能代码不好使,八成是正则表达式那儿匹配不到了,请更改一下正则,当然最主要的还是帮助大家理解思路。 本篇目标 ...
分类:编程语言   时间:2020-06-08 15:06:09    阅读次数:73
4 手动方式从浏览器中复制cookie请求网页
有些网站没有登录无法访问页面,登录后就可以访问。如人人网 所有程序要模拟登录状态,方法有手动方法和使用帐号密码自动登录方式。本篇使用手动复cookie请求要访问的网页,并把请求到网页保存到本地 1 """使用手动方式从浏览器中复制cookie请求网页""" 2 3 4 from urllib imp ...
分类:Web程序   时间:2020-06-08 11:09:22    阅读次数:127
1 urllib库(了解)
urllib是python的基本库之一,内置四大模块,即request,error,parse,robotparser,常用的request,error,一个用于发送HTTP请求,一个用于处理请求的错误。parse用于对URL的处理,拆分,合并等 1、urllib库之urlopen函数 1 """u ...
分类:Web程序   时间:2020-06-08 00:47:10    阅读次数:69
urllib.error.HTTPError: HTTP Error 403: Forbidden
``` # 简单例子 import urllib.request request = urllib.request.Request('https://python.org') response = urllib.request.urlopen(request) # print(response.re... ...
分类:Web程序   时间:2020-05-07 15:38:29    阅读次数:80
天气预报
import json, urllibimport urllib.requestfrom urllib.parse import urlencodedef main(): # 配置您申请的APPKey appkey = "3acd93b81aa4cec158184f53b8629e9e" # 1.根 ...
分类:其他好文   时间:2020-04-30 11:36:08    阅读次数:59
699条   上一页 1 2 3 4 ... 70 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!