关于mysql处理百万级以上的数据时如何提高其查询速度的方法最近一段时间由于工作需要，开始关注针对Mysql数据库的select查询语句的相关优化方法。由于在参与的实际项目中发现当mysql表的数据量达到百万级时，普通SQL查询效率呈直线下降，而且如果where中的查询条件较多时，其查询速度简直无法 ...
分类：
数据库 时间：
2017-05-08 16:02:54
阅读次数：
218
本节内容 · Spark为什么要分区 · Spark分区原则及方法 · Spark分区案例 · 参考资料 一、Spark为什么要分区 分区概念：分区是RDD内部并行计算的一个计算单元，RDD的数据集在逻辑上被划分为多个分片，每一个分片称为分区，分区的格式决定了并行计算的粒度，而每个分区的数值计算都是 ...
分类：
其他好文 时间：
2017-05-07 22:07:32
阅读次数：
234
减小图片大小（使用WebP格式的图片） 大部分的Facebook应用数据都是图片，因此降低图片的大小就能够较少数据的下载量。从而加快下载速度，这一点在高延迟的网络环境下很重要。Facebook返回给client的图片都做了压缩处理，图片压缩方面业内主要使用gzip压缩。常见的server都支持gzi ...
分类：
其他好文 时间：
2017-04-29 14:21:11
阅读次数：
196
一、索引的概念 索引的用途：我们对数据查询及处理速度已成为衡量应用系统成败的标准，而采用索引来加快数据处理速度通常是最普遍采用的优化方法。 索引是什么：数据库中的索引类似于一本书的目录，在一本书中使用目录可以快速找到你想要的信息，而不需要读完全书。在数据库中，数据库程序使用索引可以重啊到表中的数据， ...
分类：
数据库 时间：
2017-04-26 19:17:23
阅读次数：
214
1、选取最适用的字段属性 MySQL可以很好的支持大数据量的存取，但是一般说来，数据库中的表越小，在它上面执行的查询也就会越快。因此，在创建表的时候，为了获得更好的性能，我们可以将表中字段的宽度设得尽可能小。例如，在定义邮政编码这个字段时，如果将其设置为CHAR(255),显然给数据库增加了不必要的 ...
分类：
数据库 时间：
2017-04-26 11:51:40
阅读次数：
162
http://blog.csdn.net/pirage/article/details/53424544 分词原理 本小节内容参考待字闺中的两篇博文： 简单的说，kcws的分词原理就是： 另外，字符嵌入的表示可以是纯预训练的，但也可以在训练模型的时候再fine-tune,一般而言后者效果更好。对于f ...
分类：
其他好文 时间：
2017-04-24 14:08:15
阅读次数：
868
个人：尾调用时函数式编程的一个重要概念， 栈溢出： 函数调用会在内存形成一个“调用记录”，又称“调用帧”（call frame），保存调用位置和内部变量等信息。如果在函数A的内部调用函数B，那么在A的调用帧上方，还会形成一个B的调用帧。等到B运行结束，将结果返回到A，B的调用帧才会消失。如果函数B内 ...
分类：
其他好文 时间：
2017-04-21 09:41:17
阅读次数：
169
图示为100个并发，请求1000次目标地址 进行测试 最重要的两个参数：Requests per second :每秒接受请求数,这里每秒接收101个请求 Time per request:一个请求用多少耗时，这里是9毫秒 第一个参数越大越好，第二个参数越小越好 优化方法之语言级性能优化1 PHP代 ...
分类：
Web程序 时间：
2017-04-20 23:06:39
阅读次数：
235
如何优化tomcat配置(从内存、并发、缓存4个方面)优化[+]Tomcat有很多方面，我从内存、并发、缓存四个方面介绍优化方法。一.Tomcat内存优化Tomcat内存优化主要是对tomcat启动参数优化，我们可以在tomcat的启动脚本catalina.sh中设置java_OPTS参数。JAVA_OPTS参数说明-server启用..
分类：
其他好文 时间：
2017-04-18 22:31:14
阅读次数：
197
Oracle优化本身就是一件难度比较大的事情，所涉及的事情方方面面。下面说一下我的优化经验(仅限于初学者使用)： 很多书上说的优化经验，都包括索引、表结构、标量子查询以及数据库层面的优化，但是80%的优化都可以是语句级的优化。优化的对象包括：procedure、function及Sql。 对于对Or ...
分类：
数据库 时间：
2017-04-16 21:22:18
阅读次数：
221
