一、pip国内源镜像: 阿里云:http://mirrors.aliyun.com/pypi/simple/ 中国科技大学:https://pypi.mirrors.ustc.edu.cn/simple/ 豆瓣(douban):http://pypi.douban.com/simple/ 清华大学: ...
分类：
编程语言 时间：
2020-05-13 12:06:55
阅读次数：
123
Python 爬虫学到什么样就可以找工作了？ 非计算机专业，正在自学python，很多教程里提到的网站的爬虫都会写了。比如拉勾网，豆瓣，实习僧，京东，淘宝，某妹子图等等……但是因为不是计算机专业的，也没学所谓的四大名著，不知道那四大对找工作重要吗？给一个网站去写一个爬虫，基本上会了，该怎么进阶呢？希 ...
分类：
编程语言 时间：
2020-05-11 13:39:46
阅读次数：
89
网上搜到的pip国内镜像大部分是豆瓣的 ，但是根本不全，很多包没有所以推荐清华大学的 临时修改方法 可以在使用pip的时候加参数 i?https://pypi.tuna.tsinghua.edu.cn/simple 例如： ，这样就会从清华这边的镜像去安装ipykernel包 永久修改方法 wind ...
分类：
其他好文 时间：
2020-05-09 23:34:16
阅读次数：
113
{{book.name}} {{book.name}} {{book.author}} {{book.bref}} 豆瓣评分 电子书 源代码 教学视频 声明 以上资源均搜集整理自网络，并仅供私下交流学习之用,版权依然由原属机构或个人所有,若无意中侵犯了您的权益，请来信指出我们会立即会做出处理。 ...
分类：
其他好文 时间：
2020-05-09 09:11:36
阅读次数：
133
豆瓣电视剧爬虫 # coding=utf-8 import requests import json class DoubanSpider(): def __init__(self): self.url_temp_list=[ {"url_temp":"https://m.douban.com/re ...
分类：
其他好文 时间：
2020-05-08 18:42:08
阅读次数：
93
豆瓣电影分析分析流程图分析结果结果概要注意:请求头一般都是先放User-Agent，如果爬取失败再补Referer，还是失败就再补Cookie，如果喜欢稳一点的，可以每次都加上请求参数分析代码实现流程分析先完成一次请求的抓取再完成多次请求的爬取总结:循序渐进养成良好的习惯代码#!/usr/bin/python3--coding:utf-8--importrequestsimportjson定义请求
分类：
编程语言 时间：
2020-05-08 09:51:00
阅读次数：
70
1：获取豆瓣电影名称及评分 # 抓取豆瓣电影名称及评分 url="https://movie.douban.com/j/search_subjects" start=input("请输入的开始电影序号：") limit=input("请输入想要抓取的电影数量：") params={ "type": ...
分类：
其他好文 时间：
2020-05-04 17:51:54
阅读次数：
93
pip install 库名 -i 镜像源地址 pip install pymysql -i https://pypi.tuna.tsinghua.edu.cn/simple 镜像源地址 清华: https://pypi.tuna.tsinghua.edu.cn/simple 豆瓣: http:// ...
分类：
编程语言 时间：
2020-05-04 13:34:17
阅读次数：
83
1.主题：豆瓣电影top250的爬取 2.requests库和beautifulsoup4的安装 中间遇到了一次pip的升级，整体的安装还是比较顺利的 3.在看了requests库和beatufulsoup4库的用法后就开始做了 做的还是比较简单 遇到的困难：事实上这个网站是经过了5次的实验才得到的 ...
分类：
其他好文 时间：
2020-05-03 18:24:29
阅读次数：
131
国内镜像： 阿里云 http://mirrors.aliyun.com/pypi/simple/ 中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/ 豆瓣(douban) http://pypi.douban.com/simple/ 清华大学 https: ...
分类：
其他好文 时间：
2020-05-01 22:28:04
阅读次数：
86
