Cloudera提供给客户的服务内容之一就是调整和优化MapReduce job执行性能。MapReduce和HDFS组成一个复杂的分布式系统,并且它们运行着各式各样用户的代码,这样导致没有一个快速有效的规则来实现优化 代码性能的目的。在我看来,调整cluster或job的运行更像一个医生对待病人....
分类:
其他好文 时间:
2014-09-05 12:42:31
阅读次数:
307
maven是跨平台的,不仅是一个构建工具,也是一个可以管理依赖的工具。它最大化的消除了构件的重复,并且提供了中央仓库,能帮我们自动下载构件。---------------------------------------------------------------------世界上任何一个构件都可...
分类:
其他好文 时间:
2014-09-05 12:37:41
阅读次数:
165
近期准备发布一套关于 Windows Azure 的开发教程,以项目实战的方式进行演练;具体的项目还在考虑当中,如果大家有什么好的建议可以在贴子后面留言。
各位网友大家好,今天我要带领大家开发一个纯CSS的图片分类显示的网址导航,单纯看标题大家可能有些困惑,依照以往惯例,我先给大家演示一下实际运行效果:从上面的运行效果,大家不难发现,当我点击某一菜单时,导航区域会相应高亮显示此分类的图标,而其他图标则会变暗。很多人可能会说,这个这么简单,直接使用jav...
分类:
Web程序 时间:
2014-09-05 00:55:20
阅读次数:
250
Shuffle过程是MapReduce的核心,也被称为奇迹发生的地方。要想理解MapReduce, Shuffle是必须要了解的。我看过很多相关的资料,但每次看完都云里雾里的绕着,很难理清大致的逻辑,反而越搅越混。前...
分类:
其他好文 时间:
2014-09-04 22:26:00
阅读次数:
346
最近写lua写得没有力气了,所以想让脑袋放松一下,刚好看到有人在用swift做游戏:Swift游戏实战-跑酷熊猫于是脑子一短路,就想到了利用这些素材来做一个游戏。本来不想记笔记的,但是由于选择物理引擎的时候遇到诸多问题,所以选择记录下来,目前只做了个雏形,需要再完善一点。需要知识:1 cocos2d...
分类:
其他好文 时间:
2014-09-04 18:44:10
阅读次数:
221
第一步:Spark集群需要的软件; ?在1、2讲的从零起步构建好的Hadoop集群的基础上构建Spark集群,我们这里采用2014年5月30日发布的Spark 1.0.0版本,也就是Spark的最新版本,要想基于Spark 1.0.0构建Spark集群,需...
分类:
其他好文 时间:
2014-09-04 12:01:39
阅读次数:
310
Hadoop1的HDFS和Mapreduce在高可用和拓展性方面存在问题。 HDFS存在的问题: Namenode单点故障,难以应用于在线场景。 Namenode压力过大,且内存受限,影响系统扩展性。 Mapreduce存在问题: Jobtracker单点故障 ...
分类:
其他好文 时间:
2014-09-04 10:40:49
阅读次数:
254
在之前的文章中,我们已经完成了LyncServer2013
部署之前的一系列工作,也是部署Lync之前的必备条件,希望大家能慢慢体会到怎么做和为什么要这么去做。今天就可以跟大家一起分享如何去准备第一个标准版。1.手动将Lync的管理员账户加入到Csadministrator组在准备完ActiveDirecto..
分类:
其他好文 时间:
2014-09-04 10:36:40
阅读次数:
233
在之前的文章中,我们已经完成了LyncServer2013部署之前的一系列工作,也是部署Lync之前的必备条件,希望大家能慢慢体会到怎么做和为什么要这么去做。今天就可以跟大家一起分享如何去准备第一个标准版。1.手动将Lync的管理员账户加入到Csadministrator组在准备完ActiveDirector..
分类:
其他好文 时间:
2014-09-04 03:06:58
阅读次数:
178