一、背景在早期从MySQL到TiDB实施同步操作过程中，我们大多数用的是mydumper+loader进行整体全量备份的导出，之后拿到meta信息后，通过syncer实现增量同步，整体操作起来比较麻烦，涉及的配置文件较多，其基本原理就是Syncer通过把自己注册为一个MySQLSlave的方式，和MySQLMaster进行通信，然后不断读取MySQLBinlog，进行BinlogEvent解析，规
分类：
数据库 时间：
2020-11-17 12:42:38
阅读次数：
15
前言最近对外接口偶现504超时问题，原因是代码执行时间过长，超过nginx配置的15秒，然后真枪实弹搞了一次接口性能优化。在这里结合优化过程，总结了接口优化的八个要点，希望对大家有帮助呀~数据量比较大，批量操作数据入库耗时操作考虑异步处理恰当使用缓存优化程序逻辑、代码SQL优化压缩传输内容考虑使用文件/MQ等其他方式暂存，异步再落地DB跟产品讨论需求最恰当，最舒服的实现方式嘻嘻，先看一下我们对外转
分类：
其他好文 时间：
2020-11-07 15:42:12
阅读次数：
19
本文是Redis集群学习的实践总结（基于Redis 6.0+），详细介绍逐步搭建Redis集群环境的过程，并完成集群伸缩的实践。 ...
分类：
其他好文 时间：
2020-10-31 01:18:33
阅读次数：
18
前俩天运维部需要将一个服务器上面的数据库及站点环境移到另外一台服务器上面，所有文件平移过去之后，web报黄页。发现数据库master的排序规则(SQL_Latin1_General_CP1_CI_AS)和本地用户数据库的排序规则不一致（Chinese_PRC_CI_AS），所以需要将俩种排序规则设置 ...
分类：
数据库 时间：
2020-07-06 20:14:09
阅读次数：
95
具体的大数据处理方法确实有很多，但是根据笔者长时间的实践，总结了一个普遍适用的大数据处理流程，并且这个流程应该能够对大家理顺大数据的处理有所帮助。大数据来源广泛，应用需求和数据类型都不尽相同，不过最基本的处理流程是一样的。 大数据处理的基本流程 一般来说，大数据处理的基本流程可以分为数据抽取与集成、数据分析和数据解释这三个步骤。 一、数据抽取与集成 大数据来源广泛、种类多样、数据类型极
分类：
其他好文 时间：
2020-06-01 13:56:06
阅读次数：
668
背景 还是之前的那个项目，做完国际化没多久，还没来得及划水， 又有新的活了 -- 移动端的兼容。 考虑到后期的复杂度， 需要做两套资源。 具体的目标是：同一个URL，PC打开就显示PC的那一套， M端打开就显示Mobile的页面。 create-react-app 脚手架本身不支持多入口， 需要改造 ...
分类：
其他好文 时间：
2020-05-31 16:25:34
阅读次数：
74
知识点回顾 依赖包。 Microsoft.Extensions.DependencyInjection.Abstractions 核心对象和方法。 IServiceCollection。注入对象的容器。注意它只存储对象的元数据，并不保存实例对象。 IServiceProvider。注入对象的提供者。 ...
分类：
Web程序 时间：
2020-05-27 18:48:39
阅读次数：
93
目录 "1.实践内容" "1.1 Web Goat环境搭建" "1.2 SQL注入" "1.3 XSS攻击" "1.4 CSRF攻击" "2.实践问题回答" "（1）SQL注入攻击原理，如何防御" "（2）XSS攻击的原理，如何防御" "（3）CSRF攻击的原理，如何防御" "3.实践总结与体会" ...
分类：
Web程序 时间：
2020-05-25 17:47:40
阅读次数：
91
页面性能优化 学而不思则惘，思而不学则殆 前几天接到一个页面效果优化的任务，边做边查阅了一些关于页面性能的资料。做完任务之后，抽空写了一篇总结，梳理一下思路，加深自己的理解。 1. chrome的timeline 先思考这样的一个问题： 什么叫页面性能好？如何进行评判？ 直观上讲，我们通常会通过一个 ...
分类：
其他好文 时间：
2020-05-22 17:27:21
阅读次数：
92
1）0.3版本不支持指定扣除矿工费地址 2）0.3.1和0.4版本，会出现Failed to load freeze state from leveldb，官方建议不要重启，每次重启都要扫描几天，需要加参数-startclean 参考：https://msd.misuland.com/pd/3223 ...
分类：
其他好文 时间：
2020-05-11 19:00:36
阅读次数：
113
