项目中经常有需求不是消费kafka队列全部的数据，取区间数据 查询kafka最大的offset: ./kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list 192.168.1.4:9092 --topic zhangyi --time ...
分类：
其他好文 时间：
2020-02-03 20:50:51
阅读次数：
99
幂等 当涉及业务数据的变更，不是简单的数据查询时， 在调用方相同条件有效重复请求时，就需要保持业务系统数据之间的一致性，不管请求多少次都会返回相同的结果。 比如一个订单支付接口，第一次请求返回支付成功，即使后面的请求没有实际的支付行为，也应该返回查询到的支付成功的结果。如果拦截并抛出异常，就可能造成 ...
（源于一位非常厉害的dba，可惜我们相互失去了各自的联系） 1. 数据库尽量拆分到不能再拆分为止，逻辑上面通过视图和存储过程组合 2. 写入频繁的表，不能频繁删除，会导致碎片化，可以增加一个字段用来表示数据是否删除，然后定期整理，先通过删除字段区分，把没删除的数据查询拷贝到一张表，然后截断原来的表， ...
分类：
数据库 时间：
2020-01-31 10:36:41
阅读次数：
95
数据库的安装和连接 PyMySQL的安装 python连接数据库 创建表操作 操作数据 查询操作 更新操作 事务和锁 ...
分类：
数据库 时间：
2020-01-29 14:34:16
阅读次数：
75
数据查询 基本查询 方法find()：查询 db.集合名称.find({条件文档}) 方法findOne()：查询，只返回第一个 db.集合名称.findOne({条件文档}) 方法pretty()：将结果格式化 db.集合名称.find({条件文档}).pretty() 比较运算符 等于，默认是等 ...
分类：
数据库 时间：
2020-01-29 10:57:22
阅读次数：
109
1.索引的作用：提高数据查询效率 2.常见索引模型：哈希表、有序数组、搜索树 3.哈希表：键 - 值(key - value)。 4.哈希思路：把值放在数组里，用一个哈希函数把key换算成一个确定的位置，然后把value放在数组的这个位置 5.哈希冲突的处理办法：链表 6.哈希表适用场景：只有等值查 ...
分类：
其他好文 时间：
2020-01-28 19:12:17
阅读次数：
85
图 基本概念 图是由顶点集合(vertex)及顶点间的关系集合（边edge）组成的一种数据结构。 这里的图并非指代数中的图。图可以对事物以及事物之间的关系建模，图可以用来表示自然发生的连接数据，如：社交网络、互联网web页面 常用的应用有：在地图应用中找到最短路径、基于与他人的相似度图，推荐产品、服 ...
分类：
其他好文 时间：
2020-01-26 19:15:45
阅读次数：
89
GOT和POST GOT是获取服务端数据，构造查询字符串，带有？ GET 从指定的资源请求数据。查询的字符串是在 GET 请求的 URL 中发送的 /test/demo_form.asp?name1=value1&name2=value2 POST 向指定的资源提交要被处理的数据。查询的字符串是在 ...
分类：
其他好文 时间：
2020-01-26 19:09:00
阅读次数：
188
一、应用系统如何与mysql进行一次交互？ 最开始接触jdbc的时候，我们系统如何完成一次sql操作呢？第一步，建立数据库连接；第二步，操作sql；第三步，释放连接。 但是每次建立与数据库的连接非常耗时和资源，所以我们加入了连接池的概念。第一步的获取连接是从连接池中获取一个可用的连接，第三步的释放连 ...
分类：
数据库 时间：
2020-01-25 23:36:58
阅读次数：
134
SQL（Structure Query Language）结构化查询语言 DQL（data query language）数据查询语言 select操作 DML（data manipulation language）数据操作语言，主要是数据库增删改三种操作 DDL（data defination l ...
分类：
数据库 时间：
2020-01-23 16:52:49
阅读次数：
91
