网络爬虫是捜索引擎抓取系统的重要组成部分。爬虫的主要目的是将互联网上的网页下载到本地形成一个或联网内容的镜像备份。 2. 理解爬虫开发过程 1).简要说明浏览器工作原理； 网络爬虫的基本工作流程如下： 1.首先选取一部分精心挑选的种子URL； 2.将这些URL放入待抓取URL队列； 3.从待抓取UR ...
分类：
其他好文 时间：
2019-03-27 10:45:52
阅读次数：
185
ES6.3.2 副本失败处理 副本的失败处理对理解ES的数据副本模型很有帮助。在 "ES6.3.2 index操作源码流程" 的总结中提到：ES的写操作会先写主分片，然后主分片再将操作同步到副本分片。本文给出ES中的源码片断，分析副本执行操作失败时，ES是如何处理的。 副本执行源码： 实现了副本操作 ...
分类：
其他好文 时间：
2019-03-23 22:37:26
阅读次数：
166
参考链接: 1. HEVC码流解析 https://blog.csdn.net/CrystalShaw/article/details/80624804 2. HEVC编码结构：序列参数集SPS、图像参数集PPS、视频参数集VPS https://blog.csdn.net/lin453701006 ...
分类：
其他好文 时间：
2019-03-18 18:33:34
阅读次数：
633
wtforms源码流程 wtforms源码流程 实例化流程分析 1 # 源码流程 2 1. 执行type的 __call__ 方法，读取字段到静态字段 cls._unbound_fields 中； meta类读取到cls._wtforms_meta中 3 2. 执行构造方法 4 5 a. 循环cls ...
分类：
其他好文 时间：
2019-03-02 17:16:28
阅读次数：
219
本题要求从输入的N个整数中查找给定的X。如果找到，输出X的位置（从0开始数）；如果没有找到，输出“Not Found”。 输入格式： 输入在第一行中给出两个正整数N（≤20）和X，第二行给出N个整数。数字均不超过长整型，其间以空格分隔。 输出格式： 在一行中输出X的位置，或者“Not Found”。 ...
分类：
其他好文 时间：
2019-02-28 18:22:45
阅读次数：
171
2019/2/28星期四hbase表设计优化原则https://www.cnblogs.com/qingyunzong/p/8696962.html表设计1、列簇设计 追求的原则是：在合理范围内能尽量少的减少列簇就尽量减少列簇。 最优设计是：将所有相关性很强的key-value都放在同一个列簇下，这样既能做到查询效率最高，也能保持尽可能少的访问不同的磁盘文件。 以用户信息为例，可以将必须的基
分类：
其他好文 时间：
2019-02-28 16:48:13
阅读次数：
181
Flask本身没有信号，需要安装第三方组件。Flask框架中的信号基于blinker，其主要就是让开发者可是在flask请求过程中定制一些用户行为。 一、内置信号 部分源码流程： class Flask(_PackageBoundObject): def full_dispatch_request( ...
分类：
其他好文 时间：
2019-02-18 19:13:07
阅读次数：
163
在socketserver.BaseServer.serve_forever中 在process_request方法中调用finish_request方法去实例化WSGIRequestHandler 在finish_request中实例化WSGIRequestHandler 在handle方法中 在 ...
分类：
Web程序 时间：
2019-02-11 12:15:24
阅读次数：
212
说明： 仅支持以下能力的设备才具有相对应的功能。 视频码流 图片码流 其前提条件为： 1.在时间表设定的范围内。 2.动态检测、视频遮挡、本地报警使能以及相应抓图使能均开启。 视频叠加 注： 地理位置和图片叠加不能同时开启。 ...
分类：
其他好文 时间：
2019-02-11 10:54:17
阅读次数：
268
说明： 仅支持以下能力的设备才具有相对应的功能。 视频窗口功能选项 区域聚焦 - 点击该按钮，使用鼠标在视频画面上任意框选一个区域，可以让设备在该框选区域内自动聚焦。 信息标注 - 点击该按钮，选择画笔颜色，可在预览画面中涂写标注。 手势控制 - 点击该按钮，在预览界面中可通过鼠标左键拖动画面来控制 ...
分类：
其他好文 时间：
2019-02-11 10:48:08
阅读次数：
299
