Hadoop的mapreduce搭建
MapReduce
首先是spliting吧一个块切割成各种小的
MapReduce的split大小
Max.split(100M)
Min.split(10M)
Block(64M)
Max(min.split, min(max.split,block))
MapReduce的架构
主多从结构...
分类:
其他好文 时间:
2015-06-30 18:28:22
阅读次数:
102
vara=[1,2,3,5];alert(Math.max.apply(null,a));//最大值alert(Math.min.apply(null,a));//最小值多维数组vara=[1,2,3,[5,6],[1,4,8]];varta=a.join(",").split(",");//转化为...
分类:
编程语言 时间:
2015-06-30 10:06:04
阅读次数:
146
[.net面向对象程序设计进阶](2)正则表达式(二) 上一节我们说到了C#使用正则表达式的几种方法(Replace,Match,Matches,IsMatch,Split等),还有正则表达式的几种元字符及其应用实例,这些都是学习正则表达式的基础。本节,我们继续深入学习表达式的几种复杂的用法。1.分...
分类:
Web程序 时间:
2015-06-30 07:46:01
阅读次数:
170
package com.io.other.split;
import java.io.File;
import java.io.FileInputStream;
import java.io.FileNotFoundException;
import java.io.FileOutputStream;
import java.io.IOException;
import java.util.Pr...
分类:
编程语言 时间:
2015-06-30 01:30:05
阅读次数:
230
$var=explode("|",$str);把$str按|进行分割php还有其他的把字符串指定字符分割成数组str_split(string,length)参数 描述 string 必需。规定要分割的字符串。 length 可选。规定每个数组元素的长度。默认是 1。 json_decode().....
分类:
编程语言 时间:
2015-06-29 20:03:07
阅读次数:
171
1. Map相关参数 set?mapred.max.split.size?=?256000000?;?//最大分割
set?mapred.min.split.size=1?;?//最小分割
set?hive.input.format=org.apache.hadoop.hive.ql.io.CombineHiveInputFormat;?/...
分类:
其他好文 时间:
2015-06-29 15:04:36
阅读次数:
200
1.基本用法#!/usr/bin/env python# coding=utf-8import re# example 1text ="fjsk test\t fjskd bar\t \ttest"regex = re.compile('\s+')print regex.split(text)# e...
分类:
编程语言 时间:
2015-06-29 11:38:03
阅读次数:
187
string str="我是小松鼠hsgg()jsjg776sdf";string [] sArray=Regex.Split(str,"[hs][()]",RegexOptions.IgnoreCase);int i =1;foreach (string s in sArray){ Conso.....
分类:
其他好文 时间:
2015-06-28 12:23:58
阅读次数:
107
var fruit = "apple banana pear";var arr = fruit.split(' ');for (var i = 0; i < arr.length; i++) { arr[i] = arr[i].split('').reverse().join('');}v...
分类:
编程语言 时间:
2015-06-25 16:59:59
阅读次数:
134
1.知识点1从字符串中取一节字符串
$(document).ready(function(){
var a="/EOMS/system/";
alert(a.split("/")[1]);//返回值是(,EOMS,system,)
});
2.ajax对象的获取创建 XMLHttpReq...
分类:
其他好文 时间:
2015-06-25 12:21:36
阅读次数:
108