MySQL学习记录 - 日志 参考资料 Mysql的Binlog原理 监听MySQL的binlog日志工具分析：Canal Mysql redo、undo、bin、relay log 区别 ...
分类：
数据库 时间：
2021-02-08 12:29:42
阅读次数：
0
前言“删库跑路”是程序员经常谈起的话题，今天，我就要教大家如何删！库！跑！路！开个玩笑，今天文章的主题是如何使用Mysql内置的Binlog日志对误删的数据进行恢复，读完本文，你能够了解到：MySQL的binlog日志是什么？通常是用来干什么的？模拟一次误删数据的操作，并且使用binlog日志恢复误删的数据。写这篇文章的初衷，是有一次我真的险些把测试数据库的一张表给删除了，当时吓出一身冷汗。原因是
分类：
数据库 时间：
2020-12-11 11:51:15
阅读次数：
8
Canal是阿里巴巴旗下的一款开源项目，利用Java开发。主要用途是基于MySQL数据库增量日志解析，提供增量数据订阅和消费，目前主要支持MySQL。 ...
分类：
数据库 时间：
2020-10-20 16:24:09
阅读次数：
50
mysql的binlog日志的binlog_format模式与配置详解 mysql复制主要有三种方式：基于SQL语句的复制(statement-based replication, SBR)，基于行的复制(row-based replication, RBR)，混合模式复制(mixed-based ...
分类：
数据库 时间：
2020-06-11 20:04:34
阅读次数：
69
maxwell通过实时收集mysql的binlog变化，可以作为数据同步工具。但有时，应用部署在异地环境，mysql数据库的变化通过maxwell无法直接发送到数据中心进行解析和数据同步，本次使用ngix方式作为代理服务器，收集maxwell发送的json数据后，发送到后端的kafka集群。架构如下：1，多个应用平台分布在不同地域内，远端mysql数据库，可以访问互联网。2，在本地数据中心，使用n
分类：
其他好文 时间：
2020-04-10 10:39:10
阅读次数：
93
数据异构指的是把数据按照需要异地构建存储。 其中一个应用场景是分库分表的时候。假如已经按照某个维度做了分库分表，新来一个需求，需要按照另外一个维度做分库分表，这个时候就需要数据异构了。 数据异构主要有两种方式，binlog方式和mq方式。binlog方式是指订阅mysql的binlog日志，解析这些 ...
分类：
其他好文 时间：
2020-03-21 18:07:27
阅读次数：
65
前提 近段时间，业务系统架构基本完备，数据层面的建设比较薄弱，因为笔者目前工作重心在于搭建一个小型的数据平台。优先级比较高的一个任务就是需要近实时同步业务系统的数据（包括保存、更新或者软删除）到一个另一个数据源，持久化之前需要清洗数据并且构建一个相对合理的便于后续业务数据统计、标签系统构建等扩展功能 ...
分类：
数据库 时间：
2020-03-13 01:50:01
阅读次数：
141
一、持久化的作用 1.什么是持久化 redis的所有数据保存在内存中，对数据的更新将异步的保存到硬盘上 2.持久化的实现方式 快照：某时某刻数据的一个完成备份 -mysql的Dump -redis的RDB 写日志：任何操作记录日志，要恢复数据，只要把日志重新走一遍即可 -mysql的 Binlog ...
分类：
数据库 时间：
2020-01-11 13:24:55
阅读次数：
85
binlog相关 MySQL 的二进制日志 binlog 可以说是 MySQL 最重要的日志，它记录了所有的 DDL 和 DML 语句（除了数据查询语句select、show等），以事件形式记录，还包含语句所执行的消耗的时间，MySQL的二进制日志是事务安全型的。binlog 的主要目的是复制和恢复 ...
分类：
数据库 时间：
2020-01-07 18:11:39
阅读次数：
261
这个你可以看配置文件 启用了才有这样的记录默认是没有的 linux系统中的/etc/my.cnf my.cnf内容： log-bin = mysqlbin # 默认配置 比如上面的设置重启数据库会生成mysqlbin.000001文件 常用的命令 1、查看日志开启状态 show variables ...
分类：
数据库 时间：
2019-12-24 11:43:58
阅读次数：
468
