码迷,mamicode.com
首页 >  
搜索关键字:kettle 开源工具 etl    ( 3189个结果
POI使用总结
POI是apache下一个进行office相关格式文件的读写开源工具。我们最近在使用这个框架实现Excel格式数据的导入和导出功能。这里进行一个使用总结。 POI提供两种读写API模型:事件模型(eventmodel)和用户模型(usermodel)。...
分类:其他好文   时间:2014-07-22 22:39:54    阅读次数:216
Sqoop从Oracle导出数据出错:The Network Adapter could not establish the connection
Sqoop执行命令:./sqoopimport--connectjdbc:oracle:thin:@10.112.101.251:1621:crmadbmr--usernamebass_etl--password75!n!u6J--tableDBPMSADM.PD_USERSVC_INFO_00-m4--target-dir/ext/ods/PD_USERSVC_INFO_00/2014071906执行日志:crmd3n:/d2_data0/user/ocdc/bin/sqoop-1.4...
分类:数据库   时间:2014-07-21 19:27:52    阅读次数:1653
Oracle GoldenGate 快速安装配置实用指南
GoldenGate作为Oracle公司大力发展的核心战略产品,在高可用、容灾、数据抽取转换方面扮演着越来越重要的作用。goldengate可以做什么,说起来真的太多了,高可用、容灾、Real-Time数据同步,如果你做过BI,一定知道ETL的工具(datastage、infomatica等),goldengate也可以做,而..
分类:数据库   时间:2014-07-21 12:11:24    阅读次数:473
Dos命令findstr及fc
在分析或编写代码的过程中,经常需要在文件中查找字符串或对两个文件进行比较。Linux下常用的命令是grep和diff。Windows下文件比较有比较好的开源工具,如WinMerge。在文件中寻找字符串不清楚是否有好的开源工具。最近发现windows居然有dos命令可以满足需求。...
分类:其他好文   时间:2014-07-21 11:43:15    阅读次数:259
kettle spoon中“表输入”到“表输出”的乱码问题
数据库中的数据在不同的数据库中转换来装换去,由于不同库可能使用了不同的字符集,所以可能导致结果数据乱码问题。此次是在一个作业中跑数据,跑完数据前台数据显示出现乱码,检查了作业中的多有中间过程表,包括...
分类:其他好文   时间:2014-07-21 10:09:15    阅读次数:473
ArcGIS Server 10.2 实战(五)spatial etl tool 格式转换服务
上不同的地图服务平台对地图文件格式的要求多种多样,arcgis使用的文件很难应用于其他平台上,因此需要有格式转换的服务来克服这种使用不同平台带来的麻烦,下面以TIFF格式转GEOTIFF格式为例。首先需要准备几件事:1.确保安装了arcgis data interoperability for de...
分类:其他好文   时间:2014-07-19 22:02:30    阅读次数:378
条件拆分控件使用
在进行ETL数据抽取的时候,往往会对数据进行条件拆分,比如当[工资]》5000时,才进入数据仓库,否则输出到Excel。类似这种需求。今天就来讲解一下条件拆分控件的使用。达到的目的就是把[OrderStatusCode]等于99的输出到数据仓库,不等于99的输出到Excel中。第一步:准备原始数据,...
分类:其他好文   时间:2014-07-16 00:40:19    阅读次数:360
运维自动化之Cobbler系统安装详解
原文链接参考文档参考文档SA们现在都知道运维自动化的重要性,尤其是对于在服务器数量按几百台、几千台增加的公司而言,单单是装系统,如果不通过自动化来完成,根本是不可想象的。运维自动化安装方面,早期一般使用人工配置pxe+dhcp+tftp配合kickstart,现在开源工具就多了,如cobbler,O...
分类:其他好文   时间:2014-07-14 21:52:34    阅读次数:426
Kettle学习总结(一)
最近由于项目的需要,初步涉及到了Kettle的使用,现在将这两周自己使用kettle开发JOB的心得整理一下,与大家一起分享。 一、kettle是什么 Kettle是个ETL工具,主要用来管理不同数据来源的数据,按照一定的方式流出来,最常用的情况,不同系统之间数据的传递,可以使用kettle制作转换...
分类:其他好文   时间:2014-07-14 20:58:41    阅读次数:411
使用工作流更新子记录
我应该都非常希望使用工作流来更新主记录的子记录,比如:Address 和 Contract 是1对多关系,那么怎么才能实现更新Address 的时候也批量更新Contract记录呢?虽然系统并没有为我们提供这样的原生支持,但是我们任然可以使用第三方的开源工具来实现这个有意思的需求。...
分类:其他好文   时间:2014-07-12 19:50:30    阅读次数:241
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!