场景:某天执行了deletefromt1操作忘加where条件,我们需要通过昨天的全量备份+误操作之前的binlog增量备份,加以恢复。在通过mysqlbinlog解析时,需要用sed命令去过滤出t1表的insert、delete、update操作,如果binlog文件很多,并且默认是1G的大小,用这种方法费时费力,很麻..
分类:
其他好文 时间:
2014-09-16 02:46:00
阅读次数:
223
Window 下mysql binlog开启及查看...
分类:
数据库 时间:
2014-09-15 19:35:59
阅读次数:
1638
step1:配置mysql修改配置文件my.ini#forgoldengatelog-bin="C:/mysql/logbin/logbin.log"binlog-format=ROWlog-bin-index="C:\mysql\logindex"binlog_cache_size=32mmax_binlog_cache_size=512mmax_binlog_size=512m添加数据库用户ggs,具有DBA权限step2:在mysql服务器上安装配..
分类:
数据库 时间:
2014-09-12 19:20:44
阅读次数:
386
最近在做binlog日志采集同步到数据平台的事。刚开始需要借助sqoop将从库数据表数据初始化到hbase中,整个过程都需要自动化进行,尽量减少人为干预。但是,由于历史原因,线上存在两种字符集格式的数据库(表),而导入到hbase的数据我们需要统一采用utf-8格式存储。sqoop直接导入的话,没法控制中文字符转码工作。所以需要对sqoop源码进行简单改动支持这种方式。
大体思路是,通过定义一个...
分类:
数据库 时间:
2014-09-11 19:26:02
阅读次数:
573
一.安装环境centos6.5192.168.1.100Amoeba-mysqlcentos6.5192.168.1.101mysql-主centos6.5192.168.1.102mysql-从二.Mysql主从配置在主MySQL192.168.1.101上配置Vim/usr/local/mysql/etc/my.cnfserver-id=1主库一定要比从库的数字小binlog-do-db=backup从库从主库同步的数据库库..
分类:
数据库 时间:
2014-09-03 18:26:07
阅读次数:
440
用过 xtrabackup 工具的 innobackupex 脚本备份数据的人可能会注意到,–apply-log 处理过的备份数据里有两个文件说明该备份数据对应的 binlog 的文件名和位置。但有时这俩文件说明的位置可能会不同。经过实验和询问 Percona 公司,结论如下:1 对于纯 InnoD...
分类:
数据库 时间:
2014-09-01 21:01:13
阅读次数:
263
ActiveMQ中如果使用mysql innodb的同时,开启了binlog,那么在ack消息的时候,日志里就可会报错:java.sql.SQLException: Cannot execute statement: binlogging impossible since BINLOG_FORMAT = STATEMENT and at least one table uses a storage...
分类:
数据库 时间:
2014-08-27 14:50:47
阅读次数:
2492
出于公司的业务原因,既不能保留固定天数的日志,又不能让磁盘空间站满,所以只能手动删除binlog使用mysql自带的PURGE命令PURGEMASTERLOGSTO‘mysql-bin.000002‘;删除002之前(不包括002)的binlog日志,[root@DBmasterdata]#lsDBmaster.test.errib_logfile0localhost.pidmysql-..
分类:
数据库 时间:
2014-08-27 11:10:18
阅读次数:
196
说明:现在的场景是,采用数据库(Mysql)复制(binlog)的方式在两台不同服务器部署并配置主从(Master-Slave)关系; 并需要程序上的数据操作方法来访问不同的数据库,比如,update*方法访问主数据库服务器,q...
分类:
数据库 时间:
2014-08-26 17:51:56
阅读次数:
377
mysqlbinlog :unknown variable 'default-character-set=gbk'解决方法:在命令行中加入--no-defaults开关,使用mysqlbinlog --no-defaults binlog文件参见:http://blog.csdn.net/cau99...
分类:
数据库 时间:
2014-08-22 14:22:39
阅读次数:
282