好友发来信息聊起WinRAR漏洞，其实这个漏洞的利用条件很有限，实际危害并不是很高，可是这个漏洞令人恐惧的是已经遗留了很多年，并且影响到全球5多亿的WinRAR用户，所以上班的时候，成了圈子里热议的话题。好奇心驱使之下，开始了复现研究的过程。先看看原理。根据CheckPoint研究人员的说法，该问题是因UNACEV2.dll代码库中的一个深藏已久的漏洞引起的，而且该代码库从2005年以来就一直没有
mariadb服务器断电重启之后Missing MLOG_CHECKPOINT的解决办法
分类：
数据库 时间：
2020-03-30 23:47:43
阅读次数：
251
为了增强容错性和高可用，避免上游RDD被重复计算的大量时间开销，Spark RDD设计了包含多种存储级别的缓存和持久化机制，主要有三个概念：cache、persist、checkout。 1、存储级别介绍（StorageLevel） 存储级别以一个枚举类StorageLevel定义，分为以下几种： ...
分类：
系统相关 时间：
2020-03-30 12:43:50
阅读次数：
102
一致性检查点（checkpoint） 从检查点恢复状态 Flink检查点算法 保存点（save point） 1. 一致性检查点（checkpoint） Flink--有状态的流式处理 如上图sum_even （2+4），sum_odd（1 + 3 + 5），5这个数据之前的都处理完了，就出保存一个 ...
分类：
其他好文 时间：
2020-03-26 01:08:45
阅读次数：
73
大致可以这么说：checkpoint_completion_target越大,意味着checkpointer进程休眠的机会越多，以控制脏块刷盘的进度，在休眠过程中，文件缓存会自动往下刷盘，在checkpoint完成后，会调用一次fsync，将page cache都刷到磁盘。休眠越多，就会让fsync ...
分类：
数据库 时间：
2020-03-11 12:29:32
阅读次数：
109
HDFS写流程 步骤：1.客户请求namenode上传文件,附带路径2.namenode检查，并响应是否允许3.客户端将文件分块，并请求分配block和datanode地址4.namenode响应客户端求，给定地址d1、d4、d65.客户端建立管道：d1收到请求继续调用d4,d4再调用d6。按照po ...
分类：
其他好文 时间：
2020-03-02 23:06:27
阅读次数：
69
一.说明1.环境介绍本手册演示的***客户端安装过程使用以下环境：Linux系统版本：Ubuntu16.0.4***客户端版本：CheckPoint‘sLinuxSNXbuild8000100032.系统环境要求a)安装所有要求的libraries，参考sk65210。b)安装最新的版本Java3.参考SKsk65210：SSLNetworkExtendersk114267：Howtoin
分类：
系统相关 时间：
2020-02-26 22:30:12
阅读次数：
169
看反压 通常最后一个被压高的subTask的下游就是job的瓶颈之一 看checkpoint时长 checkpoint时长能在一定程度影响job的整体吞吐 看核心指标 延迟和吞吐是最重要的指标 资源使用率 提高资源利用率是最终目的。排查首先看GC 常见性能问题 JSON序列化和反序列化 MAP和Se ...
分类：
其他好文 时间：
2020-02-09 11:43:28
阅读次数：
80
ValueError The passed save_path is not a valid checkpoint ...
分类：
其他好文 时间：
2020-02-07 18:51:00
阅读次数：
432
记录comitlog，consumeQueue，Index文件的刷盘时间点，文件固定长度4k，其中只用该文件的24个字节，其存储格式： 8字节physicMsgtimestamp+8字节logicsMsgTimestamp+8字节indexMsgTimestamp physicMsgtimestam ...
分类：
其他好文 时间：
2020-01-26 23:56:50
阅读次数：
124
