十四、PostgreSQL12.2企业级应用系列公开课：调优系列公开课(一)1、如何获得慢查询的SQL语句2、常见参数设置因子与应用案例2.1、shared_buffers2.2、wal_buffers2.3、work_mem2.4、maintenance_work_mem2.5、fsync2.6、synchronous_commit2.7、checkpoint_timeout，checkpoin
分类：
数据库 时间：
2020-06-10 17:22:55
阅读次数：
78
一、概述 Savepoint 是检查点的一种特殊实现，底层实现其实也是使用 Checkpoint 的机制。 Savepoint 是用户以手工命令的方式触发 Checkpoint，并将结果持久化到指定的存储路径 中，其主要目的是帮助用户在升级和维护集群过程中保存系统中的状态数据，避免因为停机运维 或者 ...
分类：
其他好文 时间：
2020-06-09 14:52:23
阅读次数：
72
Callback API 用于跟踪epoch期间各种状态的回调函数。主要有6个类： 1. mxnet.callback.module_checkpoint(mod, prefix, period=1, save_optimizer_states=False) [source] 参数： mod：Bas ...
Checkpoint & Snapshot 检查点是Flink为流计算过程提供的容错和故障恢复机制。当程序出错时，Flink会重启受到影响的那部分算子及计算逻辑，并将它们重置到最后一次成功checkpoint时的状态。每次成功的checkpoint产生的“状态数据”其实就是这个流式计算任务在那一时刻 ...
分类：
其他好文 时间：
2020-06-07 12:38:52
阅读次数：
63
hadoop namenode的工作机制 https://blog.csdn.net/u010846741/article/details/52369527 《Hadoop管理一》checkpoint原理和过程 Standby Namenode Checkpoint过程剖析 ...
分类：
其他好文 时间：
2020-05-23 12:59:51
阅读次数：
51
Checkpoint，是Spark提供的一个比较高级的功能。有的时候啊，比如说，我们的Spark应用程序，特别的复杂，然后呢，从初始的RDD开始，到最后整个应用程序完成，有非常多的步骤，比如超过20个transformation操作。而且呢，整个应用运行的时间也特别长，比如通常要运行1~5个小时。在 ...
分类：
其他好文 时间：
2020-05-19 09:12:08
阅读次数：
88
一、checkpoint检查点为什么产生??页操作在缓冲池完成，那么缓冲池就是为了协调CPU和磁盘速度，所以页上做了数据变更，就成了脏页，就需要从缓冲池刷新到硬盘，那怎么刷新呢。频繁肯定不行，还是很多以后再提交或者不用提交，直接影响后续恢复。数据库都是这种策略WriteAheadLog事物提交时，先写重做日志，再修改页，因此永远不刷页写日志有两个条件:缓冲池可以缓冲所有的数据重做日志可以无限增大显
分类：
数据库 时间：
2020-05-07 10:51:03
阅读次数：
86
一、checkpoint检查点为什么产生??页操作在缓冲池完成，那么缓冲池就是为了协调CPU和磁盘速度，所以页上做了数据变更，就成了脏页，就需要从缓冲池刷新到硬盘，那怎么刷新呢。频繁肯定不行，还是很多以后再提交或者不用提交，直接影响后续恢复。数据库都是这种策略WriteAheadLog事物提交时，先写重做日志，再修改页，因此永远不刷页写日志有两个条件:缓冲池可以缓冲所有的数据重做日志可以无限增大显
分类：
数据库 时间：
2020-05-07 10:45:26
阅读次数：
72
100: ('continue',), 101: ('switching_protocols',), 102: ('processing',), 103: ('checkpoint',), 122: ('uri_too_long', 'request_uri_too_long'), 200: ('o ...
分类：
其他好文 时间：
2020-05-06 12:21:02
阅读次数：
68
一、简介 思考一下这个场景：如果重做日志可以无限地增大，同时缓冲池也足够大，那么是不需要将缓冲池中页的新版本刷新回磁盘。因为当发生宕机时，完全可以通过重做日志来恢复整个数据库系统中的数据到宕机发生的时刻。 但是这需要两个前提条件：1、缓冲池可以缓存数据库中所有的数据；2、重做日志可以无限增大 因此C ...
分类：
其他好文 时间：
2020-05-01 22:29:30
阅读次数：
74
