Hive增量更新方案方案一（总结出来业界可行方案）：1、Hive原始表提前规划好以时间分区，初始化装载源库记录为base_table（最新数据）2、每个相关表都会有一个timestamp列，对每一行操作做了修改，都会重置这列timestamp为当前时间戳；3、新增数据通过sqoop（支持当天抽取）或 ...
分类：
其他好文 时间：
2019-10-31 23:38:23
阅读次数：
309
最近工作中有一个需求，就是某一个比较重要的业务表经常被莫名其妙的变更。在SQL Server中这类工作如果不事前捕获记录的话，无法做到。对于捕获变更来说，可以考虑的选择包括Trace，CDC。但Trace的成本比较大，对于负载量较高的系统并不合适，而CDC需要影响业务库，因此SQL Server A ...
分类：
数据库 时间：
2019-10-26 15:01:38
阅读次数：
125
Auditor Fucking Lombok... JPA annotation should in FIELD not GETTER , otherwise the method extended named get... will also mapping to database column ...
分类：
编程语言 时间：
2019-10-25 23:37:22
阅读次数：
121
https://blog.igeekfan.cn/2019/10/06/re-start/FreeSql-Repository-Delete-Extend/ ...
分类：
数据库 时间：
2019-10-17 01:06:31
阅读次数：
186
如何写入审计追踪记录 用脚本向Audit中添加记录有两种方法，一种方法是用InserAuditEntryNew函数写入，另一种方法是生成属于“操作员输入消息”类型的报警消息，该报警消息会记录到Audit中。 Audit记录中的TargetName列是操作内容，Reason列是操作员的注释。使用Ins ...
本文章所使用的方法均来源于网络，参考的地址如下 使用的操作系统为centos7 遇到SElinux阻止的问题先 查看错误日志的文件 在两个地方 查看日志的方法 tail -f /var/log/messages tail -f /var/log/audit/audit.log //-f参数 滚动查看 ...
分类：
系统相关 时间：
2019-09-28 17:38:09
阅读次数：
186
问题: added 246 packages from 681 contributors and audited 382 packages in 17.509s found 13 vulnerabilities (4 low, 6 moderate, 2 high, 1 critical) run ...
分类：
其他好文 时间：
2019-09-27 01:31:04
阅读次数：
1631
关闭11g 新特性 开归档 oracle 11g安装完成需修改：1、关闭审计alter system set audit_trail=none scope=spfile sid='*'; 防止ORA-03113: 通信通道的文件结尾 错误。 alter system set open_cursors ...
分类：
数据库 时间：
2019-09-21 17:35:13
阅读次数：
203
IMP/EXP，数据泵，SQL*Loader，rman数据库的逻辑备份和恢复:exp和imp1.导库:导出和导入整个数据库2.导表空间:导出和导入表空间3.导表用户:导出和导入用户中所有对象4.导表:导出和导入表或表分区(1)commit=y插入并提交，频繁提交会影响数据库效率。提交数据库过大时可以添加。(2)ignore=y/n该参数表示忽略创建错误，并继续执行。(3)full=y是否完全导入。
分类：
数据库 时间：
2019-09-16 18:02:50
阅读次数：
107
摘要:《Oracle 稽核方式解析 [audit]》 以下是参考网络上文档后写下,若有错误还请指教,谢谢. ----------------------------------------------------------------------------... ...
分类：
数据库 时间：
2019-09-14 10:31:38
阅读次数：
128
