hadoop 1.0 mapreduce过程主要问题：JobTracker 是 Map-reduce 的集中处理点，存在单点故障。JobTracker 完成了太多的任务，造成了过多的资源消耗，当 map-reduce job 非常多的时候，会造成很大的内存开销，潜在来说，也增加了 JobTracke...
分类：
其他好文 时间：
2014-06-18 20:00:19
阅读次数：
377
最近一直被C# 调用native code时的内存错误，各种错误所困扰。而且在.net 4.0中非托管代码的异常不能被托管代码抓获，导致程序直接crash。 最终找到了.net 的方法。MSDN有关于expection 的详细解释。 1. 在.net 3.5中是可以抓取AccessViola...
分类：
其他好文 时间：
2014-06-18 17:10:39
阅读次数：
249
对于线程里面的异常，如果线程里面没有抓获异常会到导致整个进程crash。 这主要是由于每个线程有单独的异常栈，如果在线程内部没有抓获异常，CLR会把异常直接传到system core层，导致进程被kill掉。 这是可以使用ContinueWith()调用其它函数来继续执行，新执行的方法应该是...
分类：
编程语言 时间：
2014-06-18 16:52:15
阅读次数：
215
/* Anonymous * * How to use: sudo rm -rf / * * greetz: djrbliss, kad, Ac1dB1tch3z, nVidia! * * Only complete fix patch nvidia drivers and redefine * I...
分类：
系统相关 时间：
2014-06-18 14:57:59
阅读次数：
328
測试版本号：CDH5.0,（Hadoop2.3）在使用windows调用Hadoop yarn平台的时候，一般都会遇到例如以下的错误：2014-05-28 17:32:19,761 WARN org.apache.hadoop.yarn.server.nodemanager.DefaultConta...
分类：
其他好文 时间：
2014-06-17 00:51:07
阅读次数：
1853
MRv1
Storm
JobTracker
Nimbus
TaskTracker
Supervisor
Child
Worker
Job
Topology
Map/Reduce
Spout/Blot
shuffle
Stream grouping...
分类：
其他好文 时间：
2014-06-16 21:24:47
阅读次数：
228
删除名为-a的文件rm./-arm---a告诉rm这是最后一个选项，参见getoptls-i列出inum，然后用find.-inuminum_of_thisfile-execrm{}\;删除名为\a的文件rm\\a如何看出redhat的版本是7还是8(hutuworm)cat/proc/version或者cat/etc/redhat-release或者cat/etc/issue文件在哪个rpm中(无双..
分类：
其他好文 时间：
2014-06-16 18:27:04
阅读次数：
274
报这种错误：BackgroundIndexerCrashRecoveryjava.lang.StackOverflowError解决办法：看看原来项目的jar包有没有错的。右击项目->buildpath->configureBuidPath查看libraries如果有错误的，把jar包删掉，如果有需要的话，添加正确的jar包即可。由于每个项目的jar包是不同..
分类：
其他好文 时间：
2014-06-16 18:19:47
阅读次数：
375
Mac开机密码忘了，咋办？开不开机啦
1.打开你的Mac，command ＋S 进入你的终端界面
2.输入/sbin/mount -uaw /
3.输入rm /var/db/.AppleSetupDone (删除)
4.reboot ...
分类：
其他好文 时间：
2014-06-15 12:38:37
阅读次数：
207
$\bf引理：$设$\int_a^{ + \infty } {f\left( x \right)dx} $收敛，且${f\left( x \right)}$在$\left[ {a,{\rm{ + }}\infty } \right)$单调，则$\lim \limits_{x \to + \infty...
分类：
其他好文 时间：
2014-06-14 18:55:58
阅读次数：
172
