标签：声明 col tco idt 记录 gen str href 最大值
设计原理：通过在ODI的mapping中关联主表和子表，然后在主表的rksj上设置时间过滤，最后将子表的字段映射到目标表中。在此设计中，需要有一个变量，此变量在第一次运行时，使用一个初始值，这样第一次运行会获取此初始值后的所有源数据到目标表，然后根据目标表的rksj更新此变量值，从而得到目标表上最大的时间戳，再基于此时间点去获取源表的记录，从而实现每次运行都可以得到新增的数据。
新建一个变量保存目标表入库时间的最大值。
基于文本类型定义变量。
使用SQL获取目标表时间字段的最大值。
主表的数据基于时间字段过滤，再跟子表关联后加载子表的数据到目标表。
主表的过滤条件设置
主表和子表的关联条件设置
目标表上新增的入库时间字段，从源端主表获取。
以上映射建立完成之后，可以试运行，确保逻辑是正确的，理论上会基于变量的初始值获取源端的数据加载到目标表。即获取rksj>’2018-05-11’的所有数据加载到目标表。
再建立相关的数据处理流程，即循环获取增量。新建一个“程序包”
拖拉刚才创建的变量两次，以及刚才的mapping.
第一个变量上设置为“声明变量”
第二个变量为“刷新变量”
以上程序包已经可以手工执行，每次执行获取相应的增量数据到目标表。
保存“程序包”，并生成场景。
在生成的场景上，新建一个调度（前提是后台的agent在正常运行）
设置场景开始运行的时间
设置场景循环的间隔
在agent配置处，更新调度信息。
现在即可在查看日志处，看到指定间隔的时间之后，有该程序包处理的日志，以及每次运行后获取的增量记录数等信息。
标签：声明 col tco idt 记录 gen str href 最大值
原文地址：https://www.cnblogs.com/margiex/p/9128777.html
