一致性检查点(checkpoints) flink故障恢复机制的核心，就是应用状态的一致性检查点 有状态流应用的一致性检查点，其实就是所有任务的状态，在某个时间点的一份拷贝(一份快照)；这个时间点，应该是所有任务都恰好处理完一个相同的输入数据的时候 从检查点恢复状态 在执行流应用程序期间，flink ...
分类：
其他好文 时间：
2020-09-17 19:08:07
阅读次数：
22
1.什么是持久化？ Redis的所有数据保存在内存中，对数据异步的更新保存到磁盘上称之为Redis的持久化。内存中的数据会因为关机或断电而丢失，使用持久化可以有效解决数据丢失的问题 2.持久化方式 Redis的持久化方式有以下两种： RDB（快照） 将Redis中的数据通过一条命令可以生成一个快照， ...
分类：
其他好文 时间：
2020-09-17 19:04:12
阅读次数：
25
#一、简介 ##1、默认情况下redis的所有数据都在内存中进行存取，而将数据异步更新保存到硬盘上的操作就是持久化存储 ##2、快照：将某时某刻的数据做成一个完整的备份，如mysql的Dump，redis的RDB等 ##3、日志：任何数据操作都记录日志，要恢复数据，只要按照日志重新执行一遍即可，如m ...
分类：
其他好文 时间：
2020-09-17 18:44:30
阅读次数：
37
首先先给需要扩容的磁盘卷制作快照在控制台修改对应的的磁盘卷，把容量扩大，等待扩容进程走完成查看文件系统file-s/dev/nvme?n*#查看文件系统根据卷是否有分区，来决定是否需要执行扩展分区```bashlsblk#查看磁盘NAMEMAJ:MINRMSIZEROTYPEMOUNTPOINTnvme1n1259:0030G0disk/datanvme0n1259:1016G0disk└─nvm
分类：
其他好文 时间：
2020-08-13 11:55:01
阅读次数：
95
一、MVCC是什么？ Multi-Vesrion Concurrency Control多版本并发控制，MVCC是一种并发控制的方法，一般在数据库管理系统中，实现对数据库的并发访问。 你可以把MVCC看作一种行级别锁的妥协，在很多情况下避免了锁的使用，同时可以提供更小的开销。根据不同的实现，可以允许 ...
分类：
数据库 时间：
2020-08-05 19:46:45
阅读次数：
86
首先我们封装一个Http请求的工具类，用HttpURLConnection实现，当然你也可以用HttpClient,或者直接用Jsoup来请求（下面会讲到Jsoup）。工具类实现比较简单，就一个get方法，读取请求地址的响应内容，这边我们用来抓取网页的内容，这边没有用代理，在真正的抓取过程中，当你大量请求某个网站的时候，对方会有一系列的策略来禁用你的请求，这个时候代理就排上用场了，通过代理设置不同
分类：
编程语言 时间：
2020-08-03 23:23:49
阅读次数：
86
需求：将/dev/vdb扩展至150G环境：内核为：2.6.32-220.23.2.al.ali1.2.alios6.x86_64ECS主机步骤0、扩容是高风险操作，创建磁盘快照1、通过控制台对云盘进行扩展；2、云盘在线扩展后fdisk-l查询磁盘并未扩展；通过文档内核3.0以上才可以在线扩展磁盘，3.0以下必须要重启，磁盘resan的方式也没有扫出来3、重启后，fdisk-l可查询到已经扩展4、
分类：
其他好文 时间：
2020-07-31 12:36:57
阅读次数：
82
这周老板给了个指示，有几个关键业务的服务器的备份需要额外的再做一个异地备份，以防万一。目前公司的服务器都在EC2上，每天会自动定时做快照服务。EC2的快照是保存在S3上面的，S3standard号称提供了11个9的可靠性，99.999999999%，理论上整个region大区的所有数据中心都挂了的情况不太可能发生，不过既然老板要求了，那么就来看看如何实现吧。尽管EC2的快照是备份在S3上面的，但是
分类：
其他好文 时间：
2020-07-31 01:19:00
阅读次数：
104
Bug的身世之谜今天又分享一个问题解决的故事。请看下图框起来的错误，明显就是找不到这个class嘛！图片下面我们按照正常人的思路去排查这个问题，既然找不到class那就先看这个依赖的jar包有没有，如果没有那就是铁证如山。但是事与愿违啊，编译后的lib目录下真的有这个包order-api-2.0-SNAPSHOT.jar还是不相信，于是将order-api-2.0-SNAPSHOT.jar解压了，
分类：
其他好文 时间：
2020-07-31 01:04:13
阅读次数：
66
一、前提条件 下载并安装好minio、es环境 其中es版本为7版本以上 二、安装、配置 1、安装es需要的插件（需要重启服务） /usr/share/elasticsearch/bin/elasticsearch-plugin install repository-s3 2、配饰访问minio的账 ...
分类：
其他好文 时间：
2020-07-29 21:26:41
阅读次数：
82
