如何去创建项目这里就不对讲了，可以参考 ：https://www.cnblogs.com/braveym/p/12214367.html 先在pom.xml文件里面添加spark依赖包 <dependency> <groupId>org.apache.spark</groupId> <artifac ...
分类：
编程语言 时间：
2020-01-19 19:04:13
阅读次数：
84
public class HttpHelper {/// <summary> /// 发起POST同步请求 /// /// </summary> /// <param name="url"></param> /// <param name="postData"></param> /// <param ...
分类：
Web程序 时间：
2020-01-19 12:54:40
阅读次数：
109
public static string GetUserIp() { string ip; string[] temp; bool isErr = false; if (System.Web.HttpContext.Current.Request.ServerVariables["HTTP_X_Fo ...
代理是爬虫技术中很重要的一项。因为有一些网站会有相应的安全策略。例如检测一段时间内，某个IP地址的访问次数，如果访问频率过高，说明你不是正常访客，然后禁止你这个IP的访问。 应对这种机制有两种手段： 放慢抓取速度，减小对目标网站的访问压力。 设置代理IP，实现高频率抓取，但是这需要多个稳定的代理IP ...
分类：
Web程序 时间：
2020-01-17 11:32:07
阅读次数：
126
/************************************************************* 函数: int16_t Idle_PID_Ctrl(uint16_t setpoint,uint16_t point) 功能: 增量式PID算法,得到增量值 参数: setp ...
分类：
其他好文 时间：
2020-01-16 10:47:09
阅读次数：
70
*JMeter4.0 开始无需修改配置文件了，可以直接跳过第一步，直接用命令生成报告。 *JMeter3.1~5.1 汉化文件通用，需要者可以直接下载覆盖即可。 --以下为原文 Jmeter3.0开始就有这个新特性了，详情见官网 http://jmeter.apache.org/usermanual ...
分类：
Web程序 时间：
2020-01-11 18:30:48
阅读次数：
144
1. clone配置文件到本地服务器 git clone https://github.com/BetterVoice/freeswitch-container.git 相关Dockerfile如下： # Jenkins. FROM ubuntu:16.04 MAINTAINER Thomas Qu ...
分类：
其他好文 时间：
2020-01-10 15:45:49
阅读次数：
417
双十一大概会产生多大的数据量呢，可能大家没概念，举个例子央视拍了这么多年电视新闻节目，几十年下来他存了大概80P的数据。而今年双11一天，阿里要处理970P的数据，做为一个IT人，笔者认为今年”双十一“阿里最大的技术看点有有以下两个： 阿里的数据库，也就是刚刚拿下TPC冠军的OcceanBase，处 ...
分类：
其他好文 时间：
2020-01-10 15:25:53
阅读次数：
52
##远程登录MySql mysql -h62.234.124.229 -P31306 -ucrab -p123456 mysql --host=62.234.124.229 --user=yq --password=123456 ##给远程登录的用户授权: grant all on *.* to c ...
分类：
数据库 时间：
2020-01-10 12:13:57
阅读次数：
87
一周阅读小结（1.1 1.5） 新的一年里尝试一种新的学习方法。考虑到工作日只能在碎片时间里看一些小篇幅的技术文章，但是经常看了就忘。这里尝试每周对一些印象深刻的文章做一次review，算是对知识的复习。有的文章经常只mark不看，也争取集中在周末消化掉，不要做个马来人:) "使用 Micromet ...
分类：
其他好文 时间：
2020-01-07 00:37:04
阅读次数：
66
