资产模型建立之后，在数据初始化上有个比较特殊的地方，需要激活一个BADI，然后按顺序初始化数据。 1. 要AA11和AA12保证抽数时的增量提取间隔和总账行一致。 2. 数据抽取前确保BADI FIAA_BW_DELTA_UPDATE 先激活，该BADI得实施用以保证系统BWFIAA_AEDAT_T ...
分类：
其他好文 时间：
2017-11-20 23:21:03
阅读次数：
222
数据加工 一、数据抽取：保留原数据表中某些字段的部分信息，组成一个新字段 字段分列：截取某一字段部分信息 字段合并：几个字段合并为一个新字段 字段匹配：原数据表没有但其他数据表有的字段，有效匹配过了 字段分列 (1)菜单法 选区域--数据--分列 根据格式特点，选择合适的分隔符号 这与前面自文本导入 ...
分类：
其他好文 时间：
2017-11-08 23:32:58
阅读次数：
406
在数据抽取时，开发需要clob类型的数据，但是目标库类型是blob类型的，于是抽取的时候报错： ORA-01461: 仅能绑定要插入 LONG 列的 LONG 值错误 可能有以下几种原因： 可能有以下几种原因： 1、插入到字符串长度大于4000字节。 2、插入到表中的记录的某个字段数据的实际长度大于 ...
分类：
其他好文 时间：
2017-11-07 12:23:36
阅读次数：
319
Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 1099 bytes) in Fatal error: Allowed memory size of 134217728 bytes ex ...
分类：
Web程序 时间：
2017-10-29 17:38:43
阅读次数：
178
kettle是一款国外开源的etl工具，纯java编写，绿色无需安装，数据抽取高效稳定。kettle中有两种脚本文件，transformation和job，transformation完成针对数据的基础转换，job则完成整个工作流的控制。这里我们只用transformation完成针对数据的基础转换。在使用工具前，先安装jd..
分类：
其他好文 时间：
2017-10-18 23:14:11
阅读次数：
299
点击进入体验 数据库链接： 可以管理mysq/sqlserver/oracle的数据库链接，状态为连接状态，保证数据正常抽取抽取任务管理： 可以新增 一次性抽取/增量抽取 任务 ，3种数据库之间任意切换 可以查看抽取日志： 可以查看抽取结果数据 后期待开发功能：数据库创建，备份，还原表管理，字段注释 ...
分类：
Web程序 时间：
2017-09-28 17:19:27
阅读次数：
208
本人为转载，感谢作者的辛勤劳作：http://blog.csdn.net/rotkang/article/details/20810921 1、Kettle概念 Kettle 是一款国外开源的 ETL 工具，纯 Java 编写，绿色无需安装，数据抽取高效稳定(数据迁移工具)。 Kettle 中文名称 ...
分类：
其他好文 时间：
2017-09-19 15:25:24
阅读次数：
229
所谓分库，就是把原来在一个库中的数据放到多个库中存储； 分表就是把原来在一个表中的数据放到多个表中存储。 这里不讨论分库分表的策略和具体实现，主要想记录的一点，就是分库分表后的搜索如何实现？ 工作中遇到的是通过将库、表中的数据抽取出来，可用的工具有Solr、ElasticSearch等， 对你想要查 ...
分类：
其他好文 时间：
2017-08-23 23:07:08
阅读次数：
188
今天在做数据抽取的时候，发现有一张业务表数据量达到了5000W，所以就想将此表改为分区表。分区表的有点如下： 1、改善查询性能：对分区对象的查询可以仅搜索自己关心的分区，提高检索速度。2、增强可用性：如果表的某个分区出现故障，表在其他分区的数据仍然可用；3、维护方便：如果表的某个分区出现故障，需要修 ...
分类：
数据库 时间：
2017-08-18 18:42:06
阅读次数：
187
大数据量存储：分布式存储 日志处理: Hadoop擅长这个 海量计算: 并行计算 ETL:数据抽取到oracle、mysql、DB2、mongdb及主流数据库 使用HBase做数据分析: 用扩展性应对大量的写操作—Facebook构建了基于HBase的实时数据分析系统 机器学习: 比如Apache ...
分类：
其他好文 时间：
2017-07-18 18:44:06
阅读次数：
148
