hadoop分散磁盘I/O配置dfs.data.dir,将其值配置为多块磁盘<key>dfs.data.dir</key><value>/data/data1,/data/data2,/data/data3</value>####假设多块磁盘被挂在以上目录中2.mapreduce中间数据临时文件分散写老的配置参数为,mapred.local.dir,新配置..
分类:
其他好文 时间:
2014-09-05 16:25:12
阅读次数:
163
1 Map side tuning参数 1.1 MapTask运行内部原理 当map task开始运算,并产生中间数据时,其产生的中间结果并非直接就简单的写入磁盘。这中间的过程比较复杂,并且利用到了内存buffer来进行已经产生的 部分结果的...
分类:
其他好文 时间:
2014-08-27 14:53:18
阅读次数:
221
通信协议中的转义符
作用:在通信协议中用在协议中使得通信的内容更加安全可靠。
举例说明:假设现在需要定制一个通信协议,需要的最基本的就是一个帧头和帧尾的标志,因为通信的接收方才知道什么时候是通信的开始和结束。那么假设帧头(通信的开始)为0x02(也可以是其他),帧尾为0x03(也可以是其他),粗略的一看是没有问题的,但是试想如果在帧头和帧尾的中间数据出现0x02或者0x03的时候整个通信过程将...
分类:
其他好文 时间:
2014-08-21 11:28:54
阅读次数:
205
基本思想
首先将给定的值K与表中中间位置元素比较,若相等,则查找成功;若不等,则所需查找的元素只能在中间数据以外的前半部分或者后半部分,缩小范围后继续进行同样的查找,如此反复,直到找到为止。
代码实现
/**
* 源码名称:BinarySearch.java
* 日期:2014-08-14
* 程序功能:二分查找
* 版权:CopyRight@A2BGeek
* 作者:A...
分类:
其他好文 时间:
2014-08-14 14:17:48
阅读次数:
167
程序的主要部件:1、变量
2、条件测试
3、语句:如:if、for、while、case一、变量变量是任何一门语言中的一个重要组成部分。定义变量就是在内存空间中开辟空间,使用该空间来存储程序运行中的中间数据的。既然是存储数据的空间了,那么开辟的内存空间应该有二个特点:1、在内..
分类:
其他好文 时间:
2014-08-03 15:27:46
阅读次数:
182
关于多线程的知识,有非常多的资料可以参考。这里稍微总结一下,以求加深记忆。
关于多线程在日常工作中的使用:对于大多数的日常应用系统,比如各种管理系统,可能根本不需要深入了解,仅仅知道Thread/Runnable就够了;如果是需要很多计算任务的系统,比如推荐系统中各种中间数据的计算,对多线程的使用就较为频繁,也需要进行一下稍微深入的研究。...
分类:
编程语言 时间:
2014-07-11 00:55:45
阅读次数:
302
跟我一起学extjs5(05--主界面上加入顶部和底部区域)
这一节为主界面加一个顶部区域和底部区域。一个管理系统的界面可以粗分为顶部标题部分、中间数据展示和处理的部分、底部备注和状态部分。
在增加这二个区域之前,我们先在MainModel.js中加入一些数据。
Ext.define('app.view.main.MainModel', {
extend : 'Ext.ap...
分类:
Web程序 时间:
2014-07-01 07:19:56
阅读次数:
200
跟我一起学extjs5(05--主界面上加入顶部和底部区域)
这一节为主界面加一个顶部区域和底部区域。一个管理系统的界面可以粗分为顶部标题部分、中间数据展示和处理的部分、底部备注和状态部分。
在增加这二个区域之前,我们先在MainModel.js中加入一些数据。
Ext.define('app.view.main.MainModel', {
extend : 'Ext.ap...
分类:
Web程序 时间:
2014-06-30 18:41:12
阅读次数:
270
ShortcutMapper 是一个流行应用程序的键盘快捷键。
是一个在线资源,为每个平台的所有应用程序提供快捷方式。
使用这个资源很容易导出为手动编辑的中间数据格式...
分类:
移动开发 时间:
2014-06-20 11:38:51
阅读次数:
221
ShortcutMapper 是一个流行应用程序的键盘快捷键映射。该应用程序使用 Ajax
调用来加载键盘和应用程序数据。首先,试图找到一个在线资源,其中列出了每个平台的所有应用程序快捷方式。现在,你可以很容易地使用这个资源导出为可以手动编辑的中间数据格式。
分类:
移动开发 时间:
2014-06-02 15:54:25
阅读次数:
289