小文件导致任务执行缓慢的原因： 1.很容易想到的是map task 任务启动太多，而每个文件的实际输入量很小，所以导致了任务缓慢 这个可以通过 CombineTextInputFormat，解决，主要需要设置 mapreduce.input.fileinputformat.split.maxsize ...
分类：
其他好文 时间：
2016-04-18 11:35:11
阅读次数：
139
—— （al_me16041719002000） begin—— 1.(单选)下面哪个方法是String对象和Array对象都有的？ A.splice B.split C.replace D.concat E.sort F.join 2.(单选)以下说法错误的是？ A.IE8支持 :before B ...
分类：
Web程序 时间：
2016-04-18 08:47:49
阅读次数：
168
[基础算法] Random Forests 2011 年 8 月 9 日 Random Forest(s)，随机森林，又叫Random Trees[2][3]，是一种由多棵决策树组合而成的联合预测模型，天然可以作为快速且有效的多类分类模型。如下图所示，RF中的每一棵决策树由众多split和node组 ...
分类：
其他好文 时间：
2016-04-17 20:28:25
阅读次数：
144
1.len函数： 取字符串的长度 用法：k=len（string_name） k的值是字符串string的长度 2.split函数： 用单字符对目标字符串进行分割 用法：string_name.split（“ ”） 即用空格对字符串string进行分割 3.replace函数： 将目标字符串中的特定 ...
分类：
编程语言 时间：
2016-04-17 00:48:48
阅读次数：
247
目前为止，我们一直在通读文件，查找模式和抽取字里行间我们感兴趣的各种信息。我们一直在使用像split和find的字符串方法，以及列表和字符串的切割功能来抽取行中的部分内容。 像这样的查找和抽取任务是如此常见，所以Python拥有一个非常强大的库——正则表达式（regular expressions） ...
分类：
编程语言 时间：
2016-04-16 23:00:56
阅读次数：
192
#介绍tmux是一个优秀的终端复用软件，即使非正常掉线，也能保证当前的任务运行，这一点对于 远程SSH访问特别有用，网络不好的情况下仍然能保证工作现场不丢失!此外，tmux完全使用键盘 控制窗口，实现窗口的切换功能。简单地说，tmux对于我主要有两个功能（这应该也是tmux的主要功能）:split窗 ...
分类：
其他好文 时间：
2016-04-16 09:28:24
阅读次数：
209
Spark运行原理自我理解：
（1） 首先程序有RDD
Objects分解为DAG有向无环图
（2） 提交DAGScheduler，根据shuffer将DAG分解为一组taskset，即stages
（3） Taskset提交TaskScheduler，每个taskset在分解为多个task，即一个task就是一个split分区
...
分类：
其他好文 时间：
2016-04-15 12:21:40
阅读次数：
552
方法一；
functiongetLocationVal(id){vartemp=location.search.split(id+"=")[1]||"";returntemp.indexOf("&")>=0?temp.split("&")[0]:temp;}方法二；；functiongetArgs(){varargs={};varmatch=null;varsearch=decodeURIComponent(location.search.substring(1));v..
分类：
Web程序 时间：
2016-04-14 19:37:33
阅读次数：
161
Split机制：可以理解为HDFS上Block一分二的情况。每个Table一开始只有一个region，随着数据不断插入表，region不断增大，当增大到一个阀值的时候，Hregion就会等分会两个新的Hregion。当table中的行不断增多，就会有越来越多的Hregion。 非实时，定期触发。 H ...
分类：
其他好文 时间：
2016-04-14 01:15:18
阅读次数：
206
addinfo.java deleteinfo.java downfile.java split.java updateinfo.java add.jsp downfile.jsp list.jsp update.jsp ...
分类：
系统相关 时间：
2016-04-13 15:55:38
阅读次数：
268
