==星球水友提问==沈老师，你好，想请教一个身份证信息检索的问题。公司有一个每秒5万并发查询的业务，（假设）根据身份证MD5查询身份证信息，目前有1000亿条数据，纯文本存储，前几天看你写LevelDB，请问这个业务能利用LevelDB内存数据库进行存储么？有没有其他优化方案？画外音：LevelDB《内存KV缓存/数据库》。==问题描述完==上一位星球水友问的是36亿日志后台分页查询，紧接着又来了
分类：
其他好文 时间：
2020-11-10 11:30:25
阅读次数：
10
沈老师，你好，想请教一个数据库查询日志，前台页面显示的问题。需求：（1）按照某些特定检索条件查询日志；（2）通过前台Web页面查询并显示相关日志信息；（3）检索需求包含用户，时间段区间，类型等特定字段；希望做到：（1）查询速度尽可能快；（2）支持分页查询；目前方案：日志信息存储在Oracle中，根据日期对Oracle做了分区处理，每天生成一个分区表，每个分区表中的数据总量大概在1000W左右。在相
分类：
其他好文 时间：
2020-11-10 11:30:08
阅读次数：
11
上篇《缓冲池(bufferpool)，彻底懂了！》介绍了InnoDB缓冲池的工作原理。简单回顾一下：（1）MySQL数据存储包含内存与磁盘两个部分；（2）内存缓冲池(bufferpool)以页为单位，缓存最热的数据页(datapage)与索引页(indexpage)；（3）InnoDB以变种LRU算法管理缓冲池，并能够解决“预读失效”与“缓冲池污染”的问题；画外音：细节详见《缓冲池(bufferp
分类：
其他好文 时间：
2020-11-10 11:28:25
阅读次数：
7
all < index < ref < eq_ref < const(system) < Null 全表 < index < 辅助索引 < 多表辅助索引 < primary key/unique < Null 查看使用的索引类型 desc select * from test; >>> 可能走的索引 ...
分类：
其他好文 时间：
2020-11-10 11:21:30
阅读次数：
6
Haystack 1.什么是Haystack Haystack是django的开源全文搜索框架(全文检索不同于特定字段的模糊查询，使用全文检索的效率更高 )，该框架支持Solr,Elasticsearch,Whoosh, Xapian，搜索引擎它是一个可插拔的后端（很像Django的数据库层），所以 ...
分类：
其他好文 时间：
2020-11-10 11:17:18
阅读次数：
8
1. 导致性能下降的原因 数据过多 → 分库分表 索引（单值、复合）失效 → 索引建立 关联查询太多 Join // 设计缺陷、不得已的需求 → SQL 优化 服务器调优及各个参数设置（缓冲、线程数等）→ 调整 my.cnf 2. RE: Join 查询 3. 索引简介 3.1 是什么？ 【官方定义 ...
分类：
其他好文 时间：
2020-11-10 10:52:16
阅读次数：
3
Single Field 单字段索引 示例文档：records { "_id": ObjectId("570c04a4ad233577f97dc459"), "score": 1034, "location": { state: "NY", city: "New York" } } 在单个字段上创建 ...
分类：
数据库 时间：
2020-11-10 10:51:59
阅读次数：
8
前言 ts有多火大家也知道，惭愧的是，我现在还对它不熟悉，今天就开始学习一下吧。 typescript的数据类型 相比于ES6的数据类型来说，typescript拥有了新的几种数据类型，它们分别是void、any、never、元组、枚举以及其它的一些高级类型。 在typescript中，我们定义一个 ...
分类：
其他好文 时间：
2020-11-08 18:00:51
阅读次数：
34
*迭代器Iterator常用的api方法*booleanhasNext?()如果迭代具有更多元素，则返回true。*Enext?()返回迭代中的下一个元素。*voidremove?()从底层集合中删除此迭代器返回的最后一个元素（可选操作）。*想要遍历容器获取容器中的每一个元素，而容器中没有索引，java提供了迭代器操作*来访问容器中的每一个元素*迭代：*在去元素之前先要判断集合中是否有该元素，如果
分类：
其他好文 时间：
2020-11-08 17:31:21
阅读次数：
25
一、索引 #索引 在公司中一般也叫做下标或者角标 # 1、我们可以通过索引位读取序列中的指定元素，索引可分为正向索引和负向索引 # 2、索引的表达式：str[x] 其中x是需要我们自己填写的一个数据，# # 如：str[1]、str[0] # 3、索引中正向索引从0开始，负向索引从-1开始 4、表示 ...
分类：
编程语言 时间：
2020-11-08 17:22:05
阅读次数：
23
