分布式爬虫 - 概念：我们需要搭建一个分布式的机群，让其对一组资源进行分布联合爬取。 - 作用：提升爬取数据的效率 - 如何实现分布式？ - 安装一个scrapy-redis的组件 爬取到的数据自动存放在redis中 - 原生的scarapy是不可以实现分布式爬虫，必须要让scrapy结合着scra ...
分类：
其他好文 时间：
2020-06-30 22:22:17
阅读次数：
58
spring boot中jar包方式运行主要依赖于，打包后在jar归档文件根目录的org.springfreamwork.boot.loader.JarLauncher类中执行main方法。 JarLauncher是其中的一个启动引导类，除此以外还有warLauncher，但我们不做过多探讨； 说说 ...
分类：
编程语言 时间：
2020-06-30 22:22:03
阅读次数：
79
之前我们用tomcat源码跑起来了，那么如何加入我们的应用呢？springboot内嵌了tomcat，怎么剥离？如果项目里有websocket配置，又有哪些注意项？好，我们看一下操作。 1、要剥离springboot的内嵌tomcat，先修改pom.xml： 1.1、新增 <dependency> ...
分类：
编程语言 时间：
2020-06-30 22:21:29
阅读次数：
69
转自他人文章转自：https://blog.csdn.net/v_july_v/article/details/7624837 1 介绍 SVM（Support Vector Machines）——支持向量机是在所有知名的数据挖掘算法中最健壮，最准确的方法之一，它属于二分类算法，可以支持线性和非线性 ...
分类：
其他好文 时间：
2020-06-30 22:20:55
阅读次数：
72
iaas 基础设施即服务 paas 平台即服务 saas 软件即服务 ...
分类：
其他好文 时间：
2020-06-30 22:20:22
阅读次数：
56
在本文中，将介绍.NET中三种最受欢迎??的日志记录框架：log4net，NLog和Serilog。 log4net概述 回溯到开始或至少很接近它的时候，.NET只有一个日志记录框架：log4net。它于2001年作为Java框架log4j的端口开始。它托管在Sourceforge上，以供您那些足以 ...
分类：
Web程序 时间：
2020-06-30 22:20:06
阅读次数：
189
Exchanger详解 简介 当一个线程到达栅栏时,会检查是否有其他线程已经到达栅栏. 若没有,则该线程进入等待. 若有,则与等待的其他线程交换各自的数据,然后继续执行. 原理 内部类Participant继承自ThreadLocal,用来保存线程本地变量Node. Node存储用于单槽交换和多槽交 ...
分类：
其他好文 时间：
2020-06-30 22:19:49
阅读次数：
93
中间件 下载中间件（Downloader Middlewares） 位于scrapy引擎和下载器之间的一层组件。 作用：批量拦截到整个工程中所有的请求和响应 - 拦截请求： - UA伪装:process_request - 代理IP:process_exception:return request ...
分类：
其他好文 时间：
2020-06-30 22:19:04
阅读次数：
96
在python的类语法中，可以出现三种方法，具体如下： （1）实例方法 1）第一个参数必须是实例本身，一般使用【self】表示。 2）在实例方法中，可以通过【self】来操作实例属性，【类名】来操作类属性。 3）实例方法只能通过实例对象去调用，尽管也可以通过类名间接调用【类名.方法名(self, . ...
分类：
编程语言 时间：
2020-06-30 22:18:46
阅读次数：
67
2020-06-30 1. 动态sql 参数： 单个 1. String。基本变量 2. 集合（List）数组（array） a) 集合 size b) 数组 length 多个 1. arg0 arg1 2. param1 param2 常用动态sql 1.If（< If >标签） 作用：判断是否 ...
分类：
数据库 时间：
2020-06-30 22:18:29
阅读次数：
63
binarySearch()方法的返回值为： 1、如果找到关键字，则返回值为关键字在数组中的位置索引，且索引从0开始 2、如果没有找到关键字，返回值为负的插入点值，所谓插入点值就是第一个比关键字大的元素在数组中的位置索引，而且这个位置索引从1开始。 注意：调用binarySearch()方法前要先调 ...
分类：
其他好文 时间：
2020-06-30 22:18:17
阅读次数：
47
1）JSON对象 1.JSON json数据 外层是单引号内层属性必须用双引号引起来，如果属性值，是字符串也必须双引号 let json='[{"id":"1001","name":"joly"}]' json方法 转js数据 JSON.parse(需要转换的json数据);//js数据类型输出 j ...
分类：
Web程序 时间：
2020-06-30 22:17:56
阅读次数：
80
转发： if isinstance(str,bs4.element.Tag): 一个是isinstance函数，一个是bs4.element.Tag 1.isinstance:判断一个对象是否是一个已知的类型，类似于type（） type（）不考虑子类是父类的一种类型，不考虑继承关系 isinata ...
分类：
其他好文 时间：
2020-06-30 22:17:33
阅读次数：
70
给定一组不含重复元素的整数数组 nums，返回该数组所有可能的子集（幂集）。 说明：解集不能包含重复的子集。 示例: 输入: nums = [1,2,3]输出:[ [3], [1], [2], [1,2,3], [1,3], [2,3], [1,2], []] 回溯法，对于每个元素，先直接往下递归， ...
分类：
其他好文 时间：
2020-06-30 22:16:58
阅读次数：
65
随着互联网和智能移动设备不断普及，二维码（Quick Response code）已经成为世界上应用最为广泛的信息载体之一。生成二维码的工具也层出不穷，但多数需要在线完成，并且生成的图案也千篇一律，过于单调。 那么有没有办法实现自定义生成二维码呢？ 近日，一位热衷于终身学习的工程师兼摄影师 Arin ...
分类：
其他好文 时间：
2020-06-30 22:16:34
阅读次数：
84
写在前面 引入了 React 之后，开始使用 React 做一个小的 demo，即实现一个按钮点击加一，使用 CDN 引入 React，使用在线工具 codesandbox 的原生 JS 项目编写。 1. 引入 React 和 ReactDOM 在 index.html 中使用 BootCDN 引入 ...
分类：
其他好文 时间：
2020-06-30 22:16:05
阅读次数：
90
1 template <typename Type> //关键字class 与typename的区别，，前者可能是类，后者是一个类型 2 Type min(Type a, Type b) 3 { 4 return a < b ? a : b; 5 } 6 7 template <class Type ...
分类：
其他好文 时间：
2020-06-30 22:15:49
阅读次数：
54
