转自：http://www.sohu.com/a/201826967_524185 不知何时，自动驾驶技术从电影中跳出来，直接被拉到人们视野中。不过，去年特斯拉却因为几起自动驾驶事故，官网不得不把自动驾驶字眼改为辅助驾驶。本期《汽车总动员》讨论的不是自动驾驶，而是被称为自动驾驶汽车“眼睛”的雷达。 ...
分类：
其他好文 时间：
2020-03-07 21:01:09
阅读次数：
94
工作日模式7-7.30:听歌,充电,开机,烧水,洗漱,泡茶,写计划,回信息7.30-8点:看新闻,吃早餐8-9:坐车,玩手机9-12:编程12-13.30:吃饭,玩手机,午休13.30-18.30:编程18.30-19:吃饭18.30-19.30:坐车19.30-20.30:打电话,玩手机20.30 ...
分类：
其他好文 时间：
2020-03-07 09:45:02
阅读次数：
76
1. scrapy的请求传参 作用 : 实现深度爬取 使用场景 : 爬取的数据没有在同一张页面 例如, 爬取电影首页全部电影的详情页信息 2. scrapy的中间件, 和管道一样, 需要在配置文件中开启中间件 下载中间件 : 批量拦截requests和response 作用: + 修改请求的头信息 ...
分类：
其他好文 时间：
2020-03-05 01:28:01
阅读次数：
86
最近macOS又折腾了一次，手贱把系统升级到最新到 "macOS Catalina" ，结果大部分32位的APP都不能用了，首先是LD的同步助手，直接挂了TAT，后面直接承受LD的河东嘶吼(此次省略几百万个动作特效..) 最后LD下了死命令：必须给装回同步助手(用来把电影同步到苹果手机里),不然日子 ...
分类：
其他好文 时间：
2020-03-03 00:39:33
阅读次数：
61
电影天堂里面的 要爬取这个页面里所有的电影信息，每个电影信息都在另一个html里，先在这里页面里把这些电影的url爬取出来 # 电影天堂爬虫 from lxml import etree import requests # 一个网址头 BASE_DOMAIN="https://www.dytt8.n ...
分类：
编程语言 时间：
2020-03-02 01:16:51
阅读次数：
113
说明: 1.包含一个films.sql文件，基于mysql5.6的数据表导出文件。 2.该sql文件里面包含一个mysql数据表films,内含35000部电影m3u8源地址。 3.films数据表包含每部电影名及对应m3u8源地址。 4.可以直接应用在自己的电影网站上面。 5.资源全自网络爬取而来 ...
分类：
数据库 时间：
2020-02-28 13:53:58
阅读次数：
1658
import requestsimport parselimport timeimport threading# 模拟浏览器headers = {"Referer": "https://maoyan.com/board/4?offset=0", "User-Agent": "Mozilla/5.0 ...
分类：
编程语言 时间：
2020-02-23 09:56:39
阅读次数：
70
1. 开启 2. 通过浏览器访问node节点，http://IP:50070 检查 (如果无法访问，将防火墙关闭) 如果jps查看缺少了某个节点，首先查看xml文件是否正确，如果正确，删除hadoop/tmp文件夹，然后再次格式化，（格式化会重新创建hadoop/tmp），再次启动 3. 操作分布式 ...
分类：
Web程序 时间：
2020-02-22 11:57:30
阅读次数：
81
编译在线环境： https://www.kesci.com 一. 内容 1、使用Python爬虫爬取豆瓣网某一部电影的评论信息； 2、从评论信息中统计各级星评的数量占比 1 from urllib import request 2 from bs4 import BeautifulSoup 3 im ...
分类：
其他好文 时间：
2020-02-21 09:31:27
阅读次数：
106
这篇博客介绍怎么爬取猫眼top100的排名，网址，评分等。使用的是爬虫技术最基础的requests请求加re(正则)提取。 有时候我们看电影会不知道看什么电影比较好，一般打开电影排名，还得一下下的点击到电影排行页面。所以就有了这个爬虫，直接就能得到猫眼的电影排名和他的网址，岂不乐哉。 我们先打开到猫 ...
分类：
其他好文 时间：
2020-02-19 14:46:45
阅读次数：
83
