框架:具有很强的通用性,且封装了一些通用实现方法的项目模板 (异步框架): 高性能的网络请求 高性能的数据解析 高性能的持久化存储 高性能的全站数据爬取 高性能的深度爬取 高性能的分布式 Scrapy环境安装 IOS和Linux windows 安装完成后,输入 测试一下,出现如下图显示,即安装成功 ...
分类:
其他好文 时间:
2020-03-26 01:01:46
阅读次数:
115
说明:开发的时候打开热部署,项目上线的时候一定要关闭热部署 1.添加devtools依赖,写在本模块中 <!--般为通用配置--> <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-dev ...
分类:
其他好文 时间:
2020-03-25 23:10:48
阅读次数:
55
基于Spring+SpringMVC+Mybatis分布式敏捷开发系统架构,一般都会提供整套的公共微服务模块,在系统开发中会基于统一通用的UPMS系统来进行权限的集中管理。 那么为什么需要做通用的集中权限管理? 下面发表一下自己的看法: 所谓的集中权限管理,就是用户可以集中性的管理公司包括OA、HR ...
分类:
其他好文 时间:
2020-03-25 21:48:35
阅读次数:
138
普通用户切换到root用户 首先按组合键 CTRL+ALT+T 进入终端界面,一般终端界面默认为普通用户权限模式,如何从普通用户进入root用户 首先重置root密码 输入 sudo passwd root 然后根据提示一步一步来。 (输密码是会发现看不到数入的密码。这个貌似是防止偷窥的。) 然后进 ...
分类:
系统相关 时间:
2020-03-25 19:38:39
阅读次数:
70
通用信息 文档介绍:本文档是为了探讨提高http中的敏感数据如密码等的安全性传输方案。 修订历史:1.0 方案探讨 方案1:应用Base64 方案介绍:发送端在发送敏感数据之前,先用Base64对其进行编码,再将编码后的值传输给接收端。收端接收到该值后,用Base64对其进行解码,便可读到敏感数据的 ...
分类:
Web程序 时间:
2020-03-25 16:18:19
阅读次数:
105
今早被这个问题搞了几小时,最后还是慢慢的解决了。 一开始我从前端拿到的时间值是 1969-12-31T18:00:00.000Z T代表是分隔符,Z代表是UTC 通用标准时,以z来标识。 一开始我直接用 SimpleDateFormat sdf = new SimpleDateFormat("yyy ...
分类:
编程语言 时间:
2020-03-25 16:15:07
阅读次数:
228
为什么需要抽象类? 抽象类是一种模版模式,抽象类为所有子类提供了一个通用模版,子类可以在这个模版基础上进行扩展。 通过抽象类,可以避免子类设计的随意性。通过抽象类,我们就可以做到严格限制子类的设计,使子类之间更加通用。 使用抽象类注意的几点: 1、有抽象方法的类只能定义成抽象类 2、抽象类不能实例化 ...
分类:
编程语言 时间:
2020-03-25 09:14:02
阅读次数:
76
使用和定制 Pipeline: 在 WebMagic 中,Pileline 是抽取结束后,进行处理的部分,它主要用于抽取结果的保存,可以定制 Pipeline 可以实现一些通用的功能。 定制Pipeline,需要实现Pipeline接口,Pipeline接口定义如下: public interfac ...
分类:
Web程序 时间:
2020-03-25 01:53:02
阅读次数:
119
中缀表达式求值 题目 给出一个表达式,其中运算符仅包含+, , ,/,^(加 减 乘 整除 乘方)要求求出表达式的最终值 数据可能会出现括号情况,还有可能出现多余括号情况 数据保证不会出现 =2^31的答案 数据可能会出现负数情况 输入: (2+2)^(1+1) 输出 :16 解题思路: 中缀表达式 ...
分类:
其他好文 时间:
2020-03-25 00:51:04
阅读次数:
84
```javapackage com.lyang.dao;import java.lang.reflect.Field;import java.sql.Connection;import java.sql.PreparedStatement;import java.sql.ResultSet;imp... ...
分类:
数据库 时间:
2020-03-24 22:58:27
阅读次数:
72