./bin/hdfs zkfc -formatZK 初始安装时初始化zk，在Zookeeper中创建了路径/hadoop-ha/hacluster ./bin/hdfs haadmin -getServiceState master1 查看主节点的状态，是active还是standby ./bin/ ...
分类：
其他好文 时间：
2020-04-01 19:33:47
阅读次数：
55
公司在做游戏服务器合并的时候，对大批量数据表做了合并操作，难免会出现数据格式不一致问题。根据玩家反映BUG排查，是因为某个模块下日志表出现了数据格式问题导致。 目前想到的是有两种方案解决，第一种就是把所有的日志表数据修复；第二种就是把程序逻辑修改一下，保证查找格式正确。 我的做法是想把所有数据修复一 ...
分类：
数据库 时间：
2020-01-05 22:26:27
阅读次数：
111
导读：随着大数据的进一步发展，NoSQL 数据库系统迅速发展并得到了广泛的应用。其中，Apache Cassandra 是最广泛使用的数据库之一。对于 Cassandra 的优化是大家研究的热点，而 ScyllaDB 则为其提供了一个新的思路。ScyllaDB 是一个基于 C++ 的开源的高性能的 ...
分类：
其他好文 时间：
2020-01-03 19:37:37
阅读次数：
68
一、背景MQ组件是系统架构里必不可少的一门利器，设计层面可以降低系统耦合度，高并发场景又可以起到削峰填谷的作用，从单体应用到集群部署方案，再到现在的微服务架构，MQ凭借其优秀的性能和高可靠性，得到了广泛的认可。随着数据量增多，系统压力变大，开始出现这种现象：数据库已经更新了，但消息没发出来，或者消息先发了，但后来数据库更新失败了，结果研发童鞋各种数据修复，这种生产问题出现的概率不大，但让人很郁闷。
分类：
其他好文 时间：
2019-10-29 18:18:37
阅读次数：
103
通常我们使用PDF文件一不小心容易造成文件损坏，一般的文件还好，如果是在职场的小伙伴，那就有些不好了。 文件损坏是一件很头疼的事情，假如是一些重要的文件，而又没有备份，这个时候肯定要考虑修复数据，修复文件 下面这个方法是我亲自测试过的，PDF文件损坏，一般都是这个原因 然后我的解决方法就是先对文件进 ...
分类：
其他好文 时间：
2019-10-09 22:34:34
阅读次数：
1605
由于一次上线操作的数据变更太多，导致执行时间很长！ 由于做手动主从关系，所以操作落在了主库上。 由于主从关系不是对整个库的操作，所以在有表新增的地方，添加了dts新的同步关系。 db变更完成后，就发布代码上线了！ 以上是背景！一切看起来都很美好。 代码上线后，从从库发现数据一直没有，时间在一分分地过 ...
分类：
数据库 时间：
2019-03-02 00:52:45
阅读次数：
201
各位领导，同事好， 国安小程序上线初期，核心系统将部分白名单用户的二类户报送给账管，APP端可以在账管处查询出多个实户，导致此类用户在APP端无法做智慧存的交易， 同时部分用户的交易明细展示亦存在问题。核心系统已于11月初版本中解决此问题，国安渠道新开用户将不在报送给账管。 目前涉及部分白名单数据的 ...
分类：
其他好文 时间：
2018-12-04 22:27:16
阅读次数：
214
Hadoop的分布式协同服务，让分布式系统碰到失败时候，能够正确处理此类问题。基础功能：master选举，数据同步。Zooleeper集群有Client和Server(leader和follower)，且台数为奇数。若半数以上完好，则能够提供服务。。 Client和Server(leader和fol ...
分类：
其他好文 时间：
2018-09-12 11:15:08
阅读次数：
203
严重级别为 21 表示可能存在数据损坏。 可能的原因包括损坏的页链、损坏的 IAM 或该对象的 sys.objects目录视图中存在无效条目。 这些错误通常由硬件或磁盘设备驱动程序故障而引起。 MS Sql Server 提供了很多关于数据库修复的命令，当MS Sql Server 数据库遭到质疑或 ...
分类：
数据库 时间：
2018-08-31 14:01:35
阅读次数：
162
客户的一台DS5020 光纤存储出现故障导致数据丢失，该存储使用了16块硬盘组成raid磁盘阵列。10号盘和13号盘掉线，6号盘警告，需要进行数据恢复。Raid磁盘阵列故障情况：通过IBM storage manager将当前存储的完整日志状态备份下来，解析备份出来的存储日志获得了关于逻辑卷结构的部 ...
分类：
数据库 时间：
2018-04-12 18:39:17
阅读次数：
198
