码迷,mamicode.com
首页 > 其他好文 > 详细

KETTLE并行

时间:2017-08-31 00:58:17      阅读:178      评论:0      收藏:0      [点我收藏+]

标签:width   执行   log   集群搭建   div   http   job   任务   并行执行   

1.转换的并行
转换的并行是改变复制的数量
技术分享
技术分享
上面的转换相当于下面的:
技术分享
实际是把一个任务拆成三部分执行,相当于在一个数据库连接中做了三次查询,数据库连接的开销没有增加,但是有三个进程一起执行。





2.job的并行执行
技术分享
只需要在"START"设置即可。
建议:将job的条目都做成子job.(To do this, we suggest you wrap up the parallel work in a separate Job.)
注意,并行执行时,job条目不会按顺序执行,所以有依赖性的转换不能并行执行。

3.集群
集群就是使用多个服务器共同处理任务,某些情况下能加快处理速度。
关于集群的搭建请参考博客中《KETTLE集群搭建》一文。














KETTLE并行

标签:width   执行   log   集群搭建   div   http   job   任务   并行执行   

原文地址:http://www.cnblogs.com/skyrim/p/7456136.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!