最近的部门RPA项目中,小爬为了提升爬虫性能,使用了Python中的多进程(multiprocessing)技术,里面需要用到进程锁Lock,用到进程池Pool,同时利用map方法一次构造多个process。Multiprocessing的使用确实能显著提升爬虫速度,不过程序交由用户使用时,缺乏一个 ...
分类:
编程语言 时间:
2019-04-28 12:28:21
阅读次数:
303
DC综合简单总结(2) 建立时间和保持时间和数据输出延时时间 一、概念 建立时间和保持时间都是针对触发器的特性说的。 建立时间(Tsu:set up time) 是指在触发器的时钟信号上升沿到来以前,数据稳定不变的时间,如果建立时间不够,数据将不能在这个时钟上升沿被稳定的打入触发器,Tsu就是指这个 ...
分类:
其他好文 时间:
2019-04-28 11:22:39
阅读次数:
178
面试被问http协议?这篇文章足够覆盖所有相关问题!HTTP超文本传输协议http使用面向连接的TCP作为传输层协议。http本身无连接。请求报文CRLF是回车换行方法为GET的请求报文方法为POST的请求报文方法OPTIONS:这个方法可使服务器传回该资源所支持的所有HTTP请求方法。用’*’来代替资源名称,向Web服务器发送OPTIONS请求,可以测试服务器功能是否正常运作。HEAD:与GET
分类:
Web程序 时间:
2019-04-28 11:22:20
阅读次数:
189
load balancer 负责监听外部的连接,并将连接分发到 pool member。 LBaaS 有三个主要的概念: Pool Member,Pool 和 Virtual IP Pool Member Pool Member 是 layer 4 的实体,拥有 IP 地址并通过监听端口对外提供服务 ...
分类:
其他好文 时间:
2019-04-28 11:22:06
阅读次数:
133
面试被问http协议?这篇文章足够覆盖所有相关问题!HTTP超文本传输协议http使用面向连接的TCP作为传输层协议。http本身无连接。请求报文CRLF是回车换行方法为GET的请求报文方法为POST的请求报文方法OPTIONS:这个方法可使服务器传回该资源所支持的所有HTTP请求方法。用’*’来代替资源名称,向Web服务器发送OPTIONS请求,可以测试服务器功能是否正常运作。HEAD:与GET
分类:
Web程序 时间:
2019-04-28 11:21:47
阅读次数:
136
题目:杨氏矩阵(一个二维数组,数组的每行从左到右是递增的,每列从上到下是递增的)在这样的数组中查找一个数字是否存在。要求时间复杂度小于O(N);主要思路:题目要求时间复杂度度不能大于O(N),所以判断次数必须小于遍历一次数组次数。所以从数组的右上角开始判断,若当前元素大于要查找的数字,则跳过当前列查询下一列,若当前元素小于要查找的数,则跳过当前行查找下一行,直至找到或者找不到。eg:此处使用数组a
分类:
编程语言 时间:
2019-04-28 11:21:30
阅读次数:
140
使用System.Collections.Concurrent命名空间下的类型来用于并行循环体内: PLinq(Linq的并行计算) 上面介绍完了For和ForEach的并行计算盛宴,微软也没忘记在Linq中加入并行计算。下面介绍Linq中的并行计算。 4.0中在System.Linq命名空间下加入 ...
1.介绍 egrep工具是grep工具的扩展,相当于grep -E 2.用法 查找1个或1个以上前面的字符为例 查找0个或1个前面字符 egrep 'o?' 1.txt 匹配roo或者body egrep 'roo|body' 1.txt 用括号表示一个整体 egrep 'r(oo)|(at)o' ...
分类:
系统相关 时间:
2019-04-28 11:20:42
阅读次数:
146
迁移学习基本概念 迁移学习是这两年比较火的一个话题,主要原因是在当前的机器学习中,样本数据的获取是成本最高的一块。而迁移学习可以有效的把原有的学习经验(对于模型就是模型本身及其训练好的权重值)带入到新的领域,从而不需要过多的样本数据,也能达到大批量数据所达成的效果,进一步节省了学习的计算量和时间。 ...
分类:
其他好文 时间:
2019-04-28 11:20:24
阅读次数:
601
一.centos7部署docker 1 通过 uname -r 命令查看你当前的内核版本 2 确保 yum 包更新到最新。 3 卸载旧版本 4 安装需要的软件包, yum-util 提供yum-config-manager功能,另外两个是devicemapper驱动依赖的 5 设置yum源 6、可以 ...
分类:
其他好文 时间:
2019-04-28 11:19:49
阅读次数:
337
终端输入: sudo cat /etc/mysql/debian.cnf显示内容:# Automatically generated for Debian scripts. DO NOT TOUCH![client]host = localhostuser = debian-sys-maintpas ...
分类:
数据库 时间:
2019-04-28 11:19:15
阅读次数:
207
基于海量数据的主动挖掘,引入机器智能学习算法,挖掘安全威胁,人工智能辅助进行安全决策。利用SDN、NFV技术打造云计算安全平台,实现云环境内安全能力的横向弹性扩展,纵向基于业务系统的灵活定制
分类:
其他好文 时间:
2019-04-28 11:18:51
阅读次数:
120
js(javascript)是一门编程语言,用来实现与浏览器交互。 一 js的基本语法要求有以下几点 1严格区分大小写 2标识符起名要求与java一样,参考java. 3变量的概念,变量声明使用var关键字 4注释 单行//;多行/* ....*/ 5js的基本数据 -undefined,-Stri ...
分类:
Web程序 时间:
2019-04-28 11:18:18
阅读次数:
122
Hypervisor 分类 类型I:本地或裸机Hypervisor 这些虚拟机管理程序直接运行在主机的硬件来控制硬件和管理客体操作系统上。 特点 举例 类型II:Hosted Hypervisor 这些虚拟机管理程序运行在传统的操作系统上,就像其他计算机程序那样运行。 特点 举例 操作系统支持 有几 ...
分类:
其他好文 时间:
2019-04-28 11:18:00
阅读次数:
172
CAD设计图纸是汽车制造企业的核心资产,也是车企产品研发设计的核心竞争力。
分类:
其他好文 时间:
2019-04-28 11:16:22
阅读次数:
157
Spring 事务属性一共有四种:传播行为、隔离级别、只读和事务超时 a) 传播行为定义了被调用方法的事务边界。 传播行为 意义 PROPERGATION_MANDATORY 表示方法必须运行在一个事务中,如果当前事务不存在,就抛出异常 PROPAGATION_NESTED 表示如果当前事务存在,则 ...
分类:
编程语言 时间:
2019-04-28 11:16:08
阅读次数:
159
python py_innodb_page_info.py -v /usr/local/var/mysql/ibdata1 mylib.py py_innodb_page_info.py include.py python py_innodb_page_info.py /usr/local/var/ ...
分类:
数据库 时间:
2019-04-28 11:14:52
阅读次数:
162