码迷,mamicode.com
首页 >  
搜索关键字:hadoop map reduce 分区 分组    ( 64817个结果
linux下分区大小改变及fdisk应用
linux下分区大小改变及fdisk应用 实例解说Linux中fdisk分区使用方法 一、fdisk 的介绍 fdisk - Partition table manipulator for Linux ,译成中文的意思是磁盘分区表操作工具;本人译的不太好,也没有看中文文档;其实就是分区工具。 fdsik 能划分磁盘成为若干个区,同时也能为每个分区指定分区的文件系统,比如linu...
分类:系统相关   时间:2014-05-10 10:40:52    阅读次数:776
《linux 内核完全剖析》编译linux 0.12 内核 Ubuntu 64bits 环境
我×。。。终于好了,大概3 4个小时吧。。。各种毛刺问题。终究还是闯过来了。。。。 ubuntu2@ubuntu:~/Downloads/linux-0.00-050613/linux-0.00$ make ld -s -x -M head.o  -o system > System.map dd bs=32 if=boot of=Image skip=1 16+0 records i...
分类:系统相关   时间:2014-05-10 10:24:29    阅读次数:474
wiki 2144 砝码称重 2 STL_map
看似dp,但是数据太大,不过n很小,可以暴力解决。 由于30个数组合情况太多,所以可以分成两边,首先预处理前n/2个数能组成哪些数,并且最小消耗多少砝码,map保存下来。 然后处理右边能组合成什么数,相加就够了。 注意这样会漏掉两种情况,就是光一边就能组成最终答案的(因为map没有存数也是0),特殊处理一下就行。 #include #include #include #inc...
分类:其他好文   时间:2014-05-10 09:16:39    阅读次数:245
Pig系统分析(6)-从Physical Plan到MR Plan再到Hadoop Job
从Physical plan到Map-Reduce Plan 注:因为我们重点关注的是Pig On Spark针对RDD的执行计划,所以Pig物理执行计划之后的后端参考意义不大,这些部分主要分析流程,忽略实现细节。 入口类MRCompiler,MRCompilier按照拓扑顺序遍历物理执行计划中的节点,将其转换为MROperator,每个MROperator都代表一个map-reduce j...
分类:其他好文   时间:2014-05-10 08:46:07    阅读次数:366
Replace和ReplaceAll的区别
先澄清几个误区 1、CharSequence 不是 Char :有些小朋友根据参数的类型选择Replace或ReplaceAll方法 2、Replace 和 ReplaceAll :并不是有些小朋友想象的Replace只替代一个出现的字符,ReplaceAll 替换所有字符 3、循环替换的误区 String eventJson = "............."; Iterator<Entry> itPro = map.entrySet().iterator(); ...
分类:其他好文   时间:2014-05-10 08:39:17    阅读次数:257
List<Map<String, String>> 转 Map<String, List<String>>
将List转成Map结构,以下为没有水平的写法! 好久之前写的土方法转换,不知道有没有优秀的解法,还希望大家提供! Map map1 = new HashMap(); map1.put("a", "1"); map1.put("b", "3"); map1.put("c", "5"); Map map2 = new HashMap();...
分类:其他好文   时间:2014-05-07 08:35:55    阅读次数:292
hadoop优质链接
http://wiki.apache.org/hadoop/FAQ...
分类:其他好文   时间:2014-05-07 07:51:10    阅读次数:229
leetcode第一刷_Longest Consecutive Sequence
给你一个数组,O(N)时间找出某些个数,这些题如果没见过,还真不是很好想。做了这些题,我觉得有下面两个个比较常见的思路: 1. 用两个指针,可以从一边开始,走某个距离停止,也可能是一头一尾两个指针,定义一种大小关系,他俩比较之后移动,直到相遇。 2. 用其他的辅助的数据结构,可能是hash表,可能是map,可能是栈或者队列。这种通常用在访问了现在的不能确定他们是不是有用,是不是能影响最后的结果...
分类:其他好文   时间:2014-05-07 07:50:33    阅读次数:392
Linux学习笔记——硬盘分区和安装双系统
1.前言     假设电脑上已经安装了windows XP或者windows7。试图在使用windows的同时,在电脑上安装ubuntu。     假设电脑上已经存在C盘、D盘、E盘和F盘,且E盘和F盘的剩余空间较大。     假设ubuntu系统需要40G空间。     【使用软件】傲梅分区助手     【最终目标】为安装ubuntu系统节省出40G左右的空闲空间。40G空间来自于E盘...
分类:系统相关   时间:2014-05-07 07:39:35    阅读次数:407
leetcode第一刷_Word Ladder
这道题思路不难,本质就是BFS嘛,从一个单词开始,他的下一层是所有可以一步变到,且从来没变到过得那些string。问题是怎样确定这些可以变到的string呢?有两个条件,一,只能通过上一层的string变化一个数字得到,二,变化之后单词必须在字典中。注意是变化一个字母得到,而不是编辑距离是1,要么就复杂了,情况多了好多好多。 我最开始的思路是建个map,保存所有从开始单词能变化到得单词及这些单词...
分类:其他好文   时间:2014-05-07 06:18:46    阅读次数:276
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!