一 .概述 在之前我们使用主从复制的模式实现了一种高可用的模式. 但是这里面有一些问题,主从服务器的数据量过大的时候,主从模式就出现了问题. 在redis3.x之后,出现了集群模式,使用分片的模式将数据拆分到多个redis实例之中. 我们可以理解为数据的水平拆分. 最初我们可以将业务数据放置到一个主 ...
分类：
其他好文 时间：
2018-04-07 20:04:46
阅读次数：
162
1、没有索引或者没有用到索引(这是查询慢最常见的问题，是程序设计的缺陷) 2、I/O吞吐量小，形成了瓶颈效应。 3、没有创建计算列导致查询不优化。 4、内存不足 5、网络速度慢 6、查询出的数据量过大（可以采用多次查询，其他的方法降低数据量） 7、锁或者死锁(这也是查询慢最常见的问题，是程序设计的缺 ...
分类：
其他好文 时间：
2018-03-06 23:23:28
阅读次数：
170
对海量的数据进行处理是一项艰巨而复杂的任务。原因有以下几个方面： 一、数据量过大，数据中什么情况都可能存在。如果说有10条数据，那么大不了每条去逐一检查，人为处理，如果有上百条数据，也可以考虑，如果数据上到千万级别，甚至过亿，那不是手工能解决的了，必须通过工具或者程序进行处理，尤其海量的数据中，什么 ...
分类：
其他好文 时间：
2018-03-06 21:53:13
阅读次数：
203
SQLServer数据自动化运维说到当前的数据库类型，当前主要流行Mysql、SqlServer、Oracle等三种，区别相信大家都已经非常熟悉了，所以在此就不多介绍了，今天我们主要介绍一下我近期工作中遇到的问题，我们的门禁数据库数据存放的数据量过大，导致从页面上操作及查询非常缓慢影响日常操作效率，由于领导要求数据需要保留，方便日后查询，所以我们一般通过日期判断指定日期以外的数据删除这个不可以实现
分类：
数据库 时间：
2018-02-07 19:48:02
阅读次数：
203
在项目中经常会有如下场景： 往数据库中批量插入一批数据后，需要知道哪些插入成功，哪些插入失败了。 这时候往往会有两种思路，一个是在插入之前判断相同的记录是否存在，过滤掉重复的数据；另外一种就是边插入边判断，动态过滤。 第一种方式对于数据量过大的情况并不适用，为了采用第二种方法，我们使用了“Mybat ...
分类：
数据库 时间：
2018-01-16 00:39:59
阅读次数：
309
------------------查询速度慢的原因很多,常见如下几种:1,没有索引或者没有用到索引(这是查询慢最常见的问题,是程序设计的缺陷)2,I/O吞吐量小,形成了瓶颈效应.3,没有创建计算列导致查询不优化.4,内存不足5,网络速度慢6,查询出的数据量过大(可以采用多次查询,其他的方法降低数据... ...
分类：
数据库 时间：
2017-12-09 20:59:01
阅读次数：
208
异步实时搜索jquery select插件 一、先看看效果。 二、做此插件的原因。 1.数据量过大（几千、几万条），无法一次性全部加载。 2.现有插件各不相同，无法满足功能需求。 3.美观性，可控性不足。 三、如何使用。 1.html和js 2.实例。 3.详细配置。 还有一些其它的api，详细请看 ...
分类：
Web程序 时间：
2017-10-20 11:03:24
阅读次数：
225
新的关于数据库的内容。查询速度慢的原因很多，常见如下几种： 1、没有索引或者没有用到索引(这是查询慢最常见的问题，是程序设计的缺陷) 2、I/O吞吐量小，形成了瓶颈效应。 3、没有创建计算列导致查询不优化。 4、内存不足 5、网络速度慢 6、查询出的数据量过大(可以采用多次查询，其他的方法降低数据量 ...
分类：
数据库 时间：
2017-09-14 21:32:49
阅读次数：
280
当Mysql数据量过大时，就会面临压力分解，这时分库分表是一个不错的解决方案，现在我们就来谈谈Mysql如何分库分表比较理想，然后再用php如何调用。 1，主从复制，读写分离对主库修改数据，查询使用从库。一主多从，来降低数据库读取压力。2，分库分表根据实体业务来分库，分表。如，根据数据的活跃性，根据 ...
分类：
数据库 时间：
2017-08-18 12:42:16
阅读次数：
252
Oracle数据库，用mybatic批量插入数据: 当数据量过大时，出错： 网上一查说是缺失逗号，查找并排除了，问题依旧。 后来想到可能是SQL语句太长，在上例中插入数据是一万多条，拼接成的SQL语句至少好几十k了。 长度限制的相关文章：http://bbs.csdn.net/topics/3903 ...
分类：
数据库 时间：
2017-07-19 14:06:12
阅读次数：
3472
