需求:通过淘宝模拟登录打造一个关键词搜索库 以上代码不足之处,没有使用代理,淘宝网算是反爬比较厉害的网站,时不时会跳出来浏览限制(比如让输入验证码),一般都是因为同一个ip短时间内数据获取量太快 提供三个解决方案 1. 外接打码平台,识别验证码,返回输入 2. 如果比较牛逼,可以使用深度学习图像识别 ...
分类:
其他好文 时间:
2020-04-19 23:43:21
阅读次数:
138
核心代码: object TransformTest { def main(args: Array[String]): Unit = { val env = StreamExecutionEnvironment.getExecutionEnvironment env.setParallelism(1 ...
分类:
其他好文 时间:
2020-04-19 23:43:32
阅读次数:
337
这段时间在忙着写一个web端3D可视化编辑的项目(其实也只是有空闲并且心血来潮的时候才会去写的)和其他个人爱好相关的事情; so,看一下目前项目进度的相关截图: 其实就是将echarts的配置图形化,目前暂且写了4个组件。 然后,上个礼拜发现余额宝的收益已经跌破2%了,于是抱着玩玩的心态连夜找了一只 ...
分类:
其他好文 时间:
2020-04-19 23:43:50
阅读次数:
245
一、实现效果 (1)浏览器地址栏输入地址 http://192.168.237.132/edu/a.html,负载均衡效果,把请求平均分配到8080和 8081端口中 二、准备工作 (1)准备两台 tomcat 服务器,一台 8080,一台 8081 (因为在上一节学习中我已经把两个tomcat安装 ...
分类:
其他好文 时间:
2020-04-19 23:45:02
阅读次数:
162
Jenkins备份恢复实施方案 通过Jenkins第三方插件ThinBackup进行,在原有的Jenkins上通过该插件来定时备份数据和插件,再到备份主机上开启定时任务执行脚本去拉取备份数据,利用插件来选择备份数据来进行恢复,重启系统后方可正常使用。 Jenkins备份 Jenkins 有一个备份插 ...
分类:
其他好文 时间:
2020-04-19 23:45:29
阅读次数:
116
一:自定义数据类 为什么需要自定义数据类 上一篇文章里面我们自己写了一个mapreduce 里面的Top N的https://www.cnblogs.com/wuxiaolong4/p/12733518.html,我们可以从代码里面看出来,里面用|作分隔符,这种方法不好,会由于你自己的失误导致读取字 ...
分类:
其他好文 时间:
2020-04-19 23:46:13
阅读次数:
104
Data wrangling:Join,Combine,and Reshape,in Pandas Hierarchical indexing a 1 0.396969 2 0.348014 3 1.340860 b 1 0.502245 3 0.640700 c 1 0.063639 2 1.29 ...
分类:
其他好文 时间:
2020-04-19 23:46:59
阅读次数:
107
~~~java / 杨辉三角 根据需求生成 杨辉三角行数 1 1 1 1 2 1 1 3 3 1 1 4 6 4 1 1 5 10 10 5 1 1 6 15 20 15 6 1 / import java.util.Scanner; class Yh{ public static void mai ...
分类:
其他好文 时间:
2020-04-20 00:53:25
阅读次数:
50
转自https://segmentfault.com/a/1190000016885832?utm_source=tag-newest#item-11 React 中 keys 的作用是什么? Keys 是 React 用于追踪哪些列表中元素被修改、被添加或者被移除的辅助标识。 render () ...
分类:
其他好文 时间:
2020-04-20 00:53:58
阅读次数:
58
GDAL is a C++ translator library for more than 200 raster and vector geospatial data formats. It is released under an X/MIT style Open Source license ...
分类:
其他好文 时间:
2020-04-20 00:54:18
阅读次数:
102
介绍 Facades 为应用的 IoC 服务容器 的类提供了一个静态的接口。Laravel 里面自带了一些 Facades,如Cache等。Laravel 的门面作为服务容器中底层类的“静态代理”,相比于传统静态方法,在维护时能够提供更加易于测试、更加灵活、简明优雅的语法。 解释 在 Laravel ...
分类:
其他好文 时间:
2020-04-20 00:54:33
阅读次数:
102
一道简单题,重点在于进位的处理。 有意思的地方是,进位的动作非常适合使用递归描述,一位一位的处理,并由上一位的计算结果决定该位的处理方式。 定义递归的坐标:flag:当前处理的位数;isCarry:上一位计算是否进位 public final int[] plusOne(int[] digits) ...
分类:
其他好文 时间:
2020-04-20 00:55:48
阅读次数:
57
...
分类:
其他好文 时间:
2020-04-20 00:56:13
阅读次数:
60
React 生命周期方法 分为四个阶段:挂载 、更新、卸载、错误处理。 挂载阶段 当组件实例插入DOM时,其生命周期的调用顺序为: construstor() 构造函数 static getDerivedStateFromProps(props,state) 给派生属性更新属性 render() 渲 ...
分类:
其他好文 时间:
2020-04-20 00:57:08
阅读次数:
61
http://www.lya580.com/project/team/ 成功五步: 1.明确的目标(你想要什么) 2.详细的计划(你怎么得到,怎么去做,有效的规划拆分) 3.付出你的行动 (强的执行力) 4.修正你的行动 (不断的调整、时刻变化) 5.坚持到底(要有信念,用不言败,专注的干好一件事) ...
分类:
其他好文 时间:
2020-04-20 00:57:46
阅读次数:
85
Quorum的定义如下:假设有N个副本,更新操作wi在W个副本中更新成功之后,才认为此次更新操作wi成功,把这次成功提交的更新操作对应的数据叫做:“成功提交的数据”。对于读操作而言,至少需要读 R 个副本才能读到此次更新的数据,其中,W+R>N ,即 W 和 R 有重叠,一般,W+R=N+1。N = ...
分类:
其他好文 时间:
2020-04-20 00:58:29
阅读次数:
66
通过nmap扫描,只开放了80端口,并且该web服务是基于Joomla搭建: root@kali:~# nmap -A 192.168.74.140 Starting Nmap 7.80 ( https://nmap.org ) at 2020-04-15 10:06 CST Nmap scan r ...
分类:
其他好文 时间:
2020-04-20 00:58:45
阅读次数:
65
数组是一个大的集合,定义一个大数据类型变量 (看成整体) #include "stdafx.h" #include <stdio.h> #include <string.h> #include <math.h> // 顺序stack #define Max 20 struct stack { cha ...
分类:
其他好文 时间:
2020-04-20 00:59:01
阅读次数:
53
0.Gitlab安装部署 参考:https://www.pingface.com/archives/gitlab 1.设置logo及提示信息 2.创建一个oldboy组 gitlab是基于组来控制用户对项目的访问的,一个组可以同时包含用户和项目,用户可以对自己组的项目进行访问. 3.创建一个项目: ...
分类:
其他好文 时间:
2020-04-20 01:00:00
阅读次数:
103
第0章 环境准备 |主机名|外网IP|内网IP|内存/磁盘| | | | | | |gitlab|10.0.1.200|172.16.1.200|1C2G/20G| |jenkins|10.0.1.201|172.16.1.201|1C1G/20G| |nexus|10.0.1.202|172.16 ...
分类:
其他好文 时间:
2020-04-20 01:00:16
阅读次数:
71