1. 窗口函数 LEAD(column_name, n, default_value),用于统计窗口内往下第n行的值, LAG(column_name, n, default_value),用于统计窗口内往上第n行的值。 FIRST_VALUE(column_name),分组窗口排序后,截止到当前行
分类:
其他好文 时间:
2016-03-01 18:42:18
阅读次数:
180
hadoop 常用配置项【转】 core-site.xml name value Description fs.default.name hdfs://hadoopmaster:9000 定义HadoopMaster的URI和端口 fs.checkpoint.dir /opt/data/hadoop
分类:
其他好文 时间:
2016-02-22 20:54:05
阅读次数:
242
内容:1、RDD持久化实战;2、Spark广播实战;3、Spark累加器实战;持久化实战几个方面:1、怎么保存结果;2、实现算法的时候cache、persist;3、checkpoint广播:构建算法至关重要,降低网络传输数据量、提高内存的使用效率、加快程序的运行速度累加器:全局的指针部件的变量,..
分类:
其他好文 时间:
2016-02-21 06:49:42
阅读次数:
646
因为是测试环境,几个月之前创建的ogg再次打开,源端目标端表结构已经面目全非,然后就新建了一个表,重新开始同步,但是抽取进程不是现在:
GGSCI (single1) 12> info all
Program Status Group Lag at Chkpt Time Since Chkpt
MANAGER RUNNING ...
分类:
系统相关 时间:
2016-02-19 17:19:22
阅读次数:
205
我们知道InnoDB采用Write Ahead Log策略来防止宕机数据丢失,即事务提交时,先写重做日志,再修改内存数据页,这样就产生了脏页。既然有重做日志保证数据持久性,查询时也可以直接从缓冲池页中取数据,那为什么还要刷新脏页到磁盘呢?如果重做日志可以无限增大,同时缓冲池足够大,能够缓存所有数据,
分类:
数据库 时间:
2016-02-17 19:08:24
阅读次数:
189
1.查询系统当前SCN两条命令SQL>selectcurrent_scnfromv$database;SQL>selectdbms_flashback.get_system_change_numberfromdual;--17818932.数据库全局-检查点SCN,在控制文件中。SYS@bys1>selectdbid,checkpoint_change#fromv$database;DBIDCHECKPOINT_CHANGE#39575275..
分类:
数据库 时间:
2016-01-29 16:33:32
阅读次数:
219
每次我讲解SQL Server之前,我都会先简单谈下当我们执行查询时,在SQL Server内部发生了什么。执行一个SELECT语句非常简单,但是执行DML语句更加复杂,因为SQL Server要修改内存中的相关页,并在事务日志里记录整个事务。 介绍完这些特定步骤后,我总会问同样的问题:当我们有个未
分类:
其他好文 时间:
2016-01-28 10:50:58
阅读次数:
196
LiteOS是应用于资源受限的传感网络的一种基于线程的类UNIX操作系统。也就是说它跑在存储空间和RAM有限的超低电压微控制器上,这也是吸引我关注它的原因(在超低电压下系统更易出错)。它採用r-kernel内核,r-kernel有三个特征:1)为线程创建checkpoint。能够在出错时进行roll...
分类:
其他好文 时间:
2016-01-25 21:03:32
阅读次数:
262
启动的时候无所谓先后,关闭的话 1.首先是关闭监听(让远程客户端无法再连进来);2.发出一个系统检查点,让数据文件和控制文件的系统修改号统一;(alter system checkpoint;)3.shutdown immediate & shutdown transactional;如果是比较繁忙...
分类:
数据库 时间:
2016-01-21 01:41:55
阅读次数:
333
select*fromaa01_2014whereaaa001=(selectc.pfrom(selectaaa001,lag(aaa001,1,0)over(orderbyaaa001)aspfromaa01_2014)cwherec.aaa001='8a9299ec522f54f401522f8...
分类:
数据库 时间:
2016-01-16 12:07:14
阅读次数:
227