电影页面数据适配 上一节我们已经获取到了豆瓣的电影数据,那么接下来我们实现将获取到的数据放到页面上 一:数据过滤 1.为什么进行数据过滤? 我们只需要取得部分数据显示到界面上,因此需要将数据过滤 2.初步过滤后形成一类型数据(正在热映),还需进一步过滤形成(正在热映、即将热映、排行榜)三部分 // ...
分类:
微信 时间:
2020-04-26 10:55:45
阅读次数:
102
这个软件收费,这就很不好了 1、pillow 模块安装(处理图像的库) 默认安装:打开 cmd,输入命令: pip install pillow 豆瓣格式:打开 cmd,输入命令: pip install -i https://pypi.douban.com/simple pillow 2、验证码的 ...
分类:
Web程序 时间:
2020-04-24 01:14:45
阅读次数:
148
一、数据采集 1、代码展示 import requestsimport refrom bs4 import BeautifulSoupimport pandas as pdimport timepaiming=[]juming=[]shijian=[]daoyan=[]pingfen=[]pingr ...
分类:
其他好文 时间:
2020-04-23 20:56:29
阅读次数:
66
python虚拟环境下,使用pip导入库即可。 步骤:打开cmd -> 转到项目所在目录 -> pip install xxx pip安装时候可以选择国内源(更快一点)。指令:pip install -i (国内源) xxx (1)阿里云 http://mirrors.aliyun.com/pypi ...
分类:
编程语言 时间:
2020-04-23 00:29:44
阅读次数:
125
背景: python 版本:3.7.4 使用IDEA:pycharm 操作系统:Windows64 第一步:获取登录状态 爬取豆瓣评论是需要用户登录的,所以需要先拿到登陆相关 cookie。进入浏览器(IE浏览器把所有的 cookie 集合到一起了,比较方便取值,其他浏览器需要自己整合所有的 coo ...
分类:
编程语言 时间:
2020-04-20 12:06:10
阅读次数:
154
很多人对于Python都是非常了解的,也知道Python是一门非常不错的编程语言,拥有很多功能和作用,因此不少人都非常疑惑,Python可以用来做什么?为大家介绍一下。
分类:
编程语言 时间:
2020-04-13 18:17:22
阅读次数:
111
import json import requests if __name__ == '__main__': url = 'https://movie.douban.com/j/chart/top_list' param = { 'type': '24', 'interval_id': '100:9 ...
分类:
其他好文 时间:
2020-04-13 16:41:47
阅读次数:
91
动态加载的数据 例子1:爬取豆瓣电影中的电影详情数据 url:https://movie.douban.com/ 1.什么是动态加载的数据: 我们通过requests模块进行数据爬取无法每次都是可见即可得,有些数据是通过非浏览器地址栏中得url请求到的地址。而是其他请求请求到的数据,那么这些通过其他 ...
分类:
其他好文 时间:
2020-04-12 20:52:27
阅读次数:
99
最近学习 JSON 想获取,豆瓣的电影top250电影榜,来练习,练习。 结果输入地址: http://api.douban.com/v2/movie/top25 {"msg":"invalid_apikey, Please contact bd-team@douban.com for author ...
一. Python 发展史 1. Guido 龟叔, 1989 搞出来的, 2. 2005 - 2012 谷歌大量使用 Python , 2013 龟叔加入 dropbox (相当于中国的百度网盘) 3. 2005 豆瓣 Python 4. 2012 云计算兴起,最著名的框架是, Openstack ...
分类:
编程语言 时间:
2020-04-06 20:31:53
阅读次数:
138