本文将详细介绍基于日志的DWS平台实现和应用。如何基于日志,同步实现数据的一致性和实时抽取。
分类:
其他好文 时间:
2019-07-20 09:35:05
阅读次数:
137
目录 [TOC] 第零章、前言:为什么?做什么?怎么做? 最近带队做了公司的一个项目,叫数据交换平台,旨在物理隔离的情况下对多端业务系统进行数据的加密、传输、监控。 正好这个项目的架构师也在公司做了一次架构层面的技术分享,我便把此次分享和我在项目实践中遇到的一些坑一起整理出来,形成本系列文章。 本系 ...
分类:
其他好文 时间:
2019-06-17 01:10:36
阅读次数:
121
OA2017加密锁版:OA用户数不限制;IM用户数不限制;应用自建平台模板数不限制;分支机构数不限制;互联互通组件节点数不限制; 数据交换平台节点数不限制;业务流程平台流程数不限制;AIP版式文件点数不限制;office安全签章点数不限制;PDF安全签章点数不限制; 移动Office编辑点数Andr ...
分类:
其他好文 时间:
2017-09-24 12:57:33
阅读次数:
877
说到架构设计,不敢妄自牛逼。只能默默地向Linux致敬,没有强大的linux系统,我们做的架构设计,做的程序一天说不定挂几次。...
分类:
其他好文 时间:
2014-10-29 14:58:55
阅读次数:
308
1.基础数据的维护,基本都是人工实现2.慢慢基于文件进行导入3.专业的数据交换平台=================================Kettle:数据导入不是采取数据库模式,因为数据库要求无逻辑,所以基于逻辑抽取,也就是一个ETL的过程。所以使用开源的Kettle工具: 1.完善的....
分类:
其他好文 时间:
2014-09-12 21:56:34
阅读次数:
366
1.在数据存储上面,大家都是使用数据库进行存储,里面建一些表,存储数据。场景: 一些非常复杂的计算,在存储过程里面实现,一些临时数据可以存储到临时表里面,最后将汇总的数据存储的正式表里面。例子: 数据交换平台: 导入数据时,将原始数据先导入临时表。 再对临时表里面的数据按照规则进行校...
分类:
其他好文 时间:
2014-09-07 12:09:45
阅读次数:
189