解释： 1、JVM重用是hadoop调优参数的内容，对hive的性能具有非常大的影响，特别是对于很难避免小文件的场景或者task特别多的场景，这类场景大多数执行时间都很短。hadoop默认配置是使用派生JVM来执行map和reduc...
分类：
其他好文 时间：
2015-08-11 19:26:44
阅读次数：
463
1.线程的基本介绍(1)线程的概述线程与进程类似，也允许应用程序并发执行多个任务的一种机制。一个进程可以包含多个线程，同一程序中的所有线程共享同一份全局内存区域，线程之间没有真正意义的等级之分。同一个进程中的线程可以并发执行，如果处理器是多核的话线程也可以并行执行，如果一个线程因为等待I/O操作而阻塞，那么其他线程依然可以继续运行(2)线程优于进程的方面
argv,environ 主线程栈...
分类：
编程语言 时间：
2015-08-09 22:38:38
阅读次数：
215
多线程访问共享数据解决方案：
一，什么是多线程
线程是程序中一个单一的顺序控制流程.在单个程序中同时运行多个线程完成不同的工作,称为多线程.
所有的线程虽然在微观上是串行执行的，但是在宏观上你完全可以认为它们在并行执行
二，多线程访问共享数据解决方案
1，如果每个线程执行的代码相同，可以使用同一个Runnable对象，这个Runnable对象中有那个共享数据。例如：卖...
分类：
编程语言 时间：
2015-07-31 09:07:31
阅读次数：
147
OpenMP 并行化处理测试#pragmaomp parallelfor这条语句是用来指定后面的for循环语句变成并行执行的,将for循环里的语句变成并行执行后效率会不会提高呢?还是测试一 下吧，测试的时候，循环最好大一些，增加计算量，不然程序耗时太短，很难区分。 1 #include 2 #...
分类：
其他好文 时间：
2015-07-21 20:25:03
阅读次数：
102
Fork/Join框架是Java7提供了的一个用于并行执行任务的框架， 是一个把大任务分割成若干个小任务，最终汇总每个小任务结果后得到大任务结果的框架。
分类：
其他好文 时间：
2015-07-19 00:01:44
阅读次数：
139
1. Threads 和 Runnables 所有的现代操作系统都通过进程和线程来支持并发。进程是通常彼此独立运行的程序的实例，比如，如果你启动了一个Java程序，操作系统产生一个新的进程，与其他程序一起并行执行。在这些进程的内部，我们使用线程并发执行代码，因此，我们可以最大限度的利用CPU可用的....
分类：
编程语言 时间：
2015-07-14 19:32:11
阅读次数：
112
介绍：Grand Central Dispatch 简称（GCD）是苹果公司开发的技术，以优化的应用程序支持多核心处理器和其他的对称多处理系统的系统。这建立在任务并行执行的线程池模式的基础上的。它首次发布在Mac OS X 10.6 ，iOS 4及以上也可用。设计：GCD的工作原理是：让程序平行排队的特定任务，根据可用的处理资源，安排他们在任何可用的处理器核心上执行任务。一个任务可以是一个函数(fu...
分类：
编程语言 时间：
2015-07-12 14:22:01
阅读次数：
171
同步和阻塞：这两个术语可以互换使用，指的是代码的执行会在函数返回之前停止。如果某个操作阻塞，那么脚本就无法继续，这意味着必须等待。异步和非阻塞：这两个术语可以互换使用，指的是基于回调的、允许脚本并行执行操作的方法。脚本无需等待某个操作的结果才能继续前进，因为操作结果会在事件发生时由回调来处理。使用异...
分类：
Web程序 时间：
2015-07-08 20:33:33
阅读次数：
146
kettle中转换和作业的执行顺序： 1、一个作业内的转换，是顺序执行的。 2、一个转换内的步骤是并行执行的。 3、作业内不支持事务，转换内支持事务。根据业务需要，通常需要在转换内顺序执行，小技巧如下： 1、执行SQL是优先于所有步骤。 2、使用“阻塞数据直到步骤都完成”，确保其他数据步骤...
分类：
其他好文 时间：
2015-07-08 20:22:03
阅读次数：
1001
介绍：
Grand Central Dispatch 简称（GCD）是苹果公司开发的技术，以优化的应用程序支持多核心处理器和其他的对称多处理系统的系统。这建立在任务并行执行的线程池模式的基础上的。它首次发布在Mac OS X 10.6 ，iOS 4及以上也可用。
设计：
GCD的工作原理是：让程序平行排队的特定任务，根据可用的处理资源，安排他们在任何可用的处理器核心上执行任务。
...
分类：
移动开发 时间：
2015-07-08 18:56:35
阅读次数：
138
