OLE DB Command transformation component 能够引用参数,逐行调用sqlcommand,This transformation is typically used for running parameterized queries。 1,自定义属性 OLE DB ...
分类:
数据库 时间:
2017-04-10 13:40:15
阅读次数:
313
在SSIS中,可以使用C#编写脚本,这是十分激动人心的事,能够使用C#代码,使得Script Component无所不能。 第一部分:组件简介Script Component 有三种类型:Source, Destination and Transformation 1,每种类型的脚本,都有两种类型的 ...
分类:
其他好文 时间:
2017-04-10 13:36:07
阅读次数:
246
一 关于Kettle Kettle是一款国外开源的ETL工具,纯java编写,数据抽取高效稳定的数据迁移工具。Kettle中有两种脚本文件,transformation和job,transformation完成针对数据的基础转换,job则完成整个工作流程的控制。 二 本项目中的ETL需求 本项目主要 ...
分类:
其他好文 时间:
2017-03-30 19:02:33
阅读次数:
283
Spark编程模型回顾 Spark编程模型几大要素 (1) Driver Program (2) 输入-Transformation-Action (3) 缓存 (4) 共享变量 RDD的五大特征 (1)分区 partitions (2)依赖 dependencies() (3)计算函数 compu ...
分类:
其他好文 时间:
2017-03-24 14:13:29
阅读次数:
262
一:DTS(Data Transformation Service) 数据转换服务 大多数组织都使用多种格式和多个位置来存储数据。 为了支持决策、改善系统性能或对现有系统进行升级,经常必须将数据从一个数据存储位置移动到另一个存储位置。 二:云数据库的RDS是什么? ...
分类:
数据库 时间:
2017-03-22 15:13:00
阅读次数:
332
VMware提供了三种将虚拟网卡和物理网卡捆绑起来的方式,即桥接(Bridge)模式,网络地址转换(Network Address Transformation, NAT)模式和主机(Host Only)模式。 关于三种模式的区别,简单而言: (1) Bridge模式直接将虚拟机添加到局域网中,使虚 ...
分类:
其他好文 时间:
2017-03-21 16:48:52
阅读次数:
264
含义: IterativeClosestPointNonLinear is an ICP variant that uses Levenberg-Marquardt optimization backend. The resultant transformation is optimized as ...
分类:
其他好文 时间:
2017-03-12 16:48:30
阅读次数:
875
题目链接:http://acm.hdu.edu.cn/showproblem.php?pid=1041 题目大意:初始数字1。规则1变成01,0变成10。问经过N次完整变换后,有多少连续零对。 关键思想:考虑零对的直接来源只有"10",而"10"的直接来源只有”1“或者”00“。于是可以得到以下几种 ...
分类:
其他好文 时间:
2017-02-19 13:56:49
阅读次数:
154
当你开始编写 Apache Spark 代码或者浏览公开的 API 的时候,你会遇到各种各样术语,比如transformation,action,RDD 等等。 了解到这些是编写 Spark 代码的基础。 同样,当你任务开始失败或者你需要透过web界面去了解自己的应用为何如此费时的时候,你需要去了解 ...
分类:
Web程序 时间:
2017-02-02 16:32:03
阅读次数:
361
一、背景 公司在用kettle做数据etl,每做完一个job或transformation发布上线想要立即执行看数据效果的话每次都是找运维同学登陆服务器打开kettle找到对应的文件点击执行,整个过程效率低下,不仅占用运维时间,期间自己也在白白等待,浪费生命。 google “kettle remo ...
分类:
Web程序 时间:
2017-01-25 12:39:00
阅读次数:
840