一、为什么要对SQL进行优化 我们开发项目上线初期，由于业务数据量相对较少，一些SQL的执行效率对程序运行效率的影响不太明显，而开发和运维人员也无法判断SQL对程序的运行效率有多大，故很少针对SQL进行专门的优化，而随着时间的积累，业务数据量的增多，SQL的执行效率对程序的运行效率的影响逐渐增大，此 ...
分类：
数据库 时间：
2020-05-11 01:35:58
阅读次数：
95
一、Hive-sql优化 #增加reducer任务数量（拉取数量分流） set mapred.reduce.tasks=20; #在同一个sql中的不同的job是否可以同时运行,默认为false set hive.exec.parallel=true; #增加同一个sql允许并行任务的最大线程数 s ...
分类：
数据库 时间：
2020-05-11 01:21:52
阅读次数：
80
从从参加工作到现在，已经接近三年了。在这不长不短的时间里，我的职业规划犹如正余弦函数一样变化，一直游离在前端和后端之间。 第一年入职，被安排维护和拓展一套基于JAVA实现的地图瓦片生产工艺程序，不算复杂，基本上也涉及到了一些JAVA的特性，例如文件IO、多线程处理文件、Servlet实现、RPC等等 ...
分类：
其他好文 时间：
2020-05-10 00:55:12
阅读次数：
117
索引查询要尽可能的避免回表,如不可避免,要关注聚合因子是否过大,聚合因子过大,回表代价高,产生的bufer 多 第一步，构造有序列ｘ在表＂colocated ＂，无序列ｘ在表＂disorganized＂ --构造有序列ｘ在表＂colocated ＂ drop table colocated purg ...
分类：
数据库 时间：
2020-05-08 20:08:43
阅读次数：
116
组合索引与排序 步骤一 构造测试表 drop table TX1 purge; create table TX1 as select * from dba_objects; create index idx_object_id on TX1(owner,object_type); alter tab ...
分类：
数据库 时间：
2020-05-08 14:41:06
阅读次数：
84
性能优化专题 阿里P8架构师谈：MySQL数据库的索引原理、与慢SQL优化的5大原则 阿里P8架构师谈：Web前端、应用服务器、数据库SQL等性能优化总结 大型网站Web前端优化最佳实践，以及最全优化工具集锦 阿里P8架构师谈：多线程、架构、异步消息、Redis等性能优化策略 性能问题简介 应用性能 ...
分类：
移动开发 时间：
2020-05-07 13:44:24
阅读次数：
81
存储数据的演变过程 随意的存到一个文件中、数据格式也是千差万别的完全取决于我们自己 软件开发目录规范 限制了存储数据的具体位置 假设上述是一个单机游戏 那么每个人的游戏记录只会在自己的计算机上面保存 注册登录的账号也只能在自己的计算机上有效 如何将单机变成连网 数据库的本质 MySQL 重要概念介绍 ...
分类：
其他好文 时间：
2020-04-30 20:57:24
阅读次数：
54
MySQL管理之道：性能调优、高可用与监控由资深MySQL专家撰写，以最新的MySQL版本为基础，以构建高性能MySQL服务器为核心，从故障诊断、表设计、SQL优化、性能参数调优、mydumper逻辑、xtrabackup热备份与恢复、MySQL高可用集群搭建与管理、MySQL服务器性能和服务监控等 ...
分类：
数据库 时间：
2020-04-29 12:27:38
阅读次数：
167
什么叫做sql优化？ 优化sql，最重要就是优化sql索引 索引相当于字典的目录，利用字典目录查找汉字的过程相当于利用sql索引查找某条记录的过程，有了索引就能很快地定位到某条记录，加快查询速率。 为什么需要优化？ 进行多表连接查询、子查询等操作的时候，写出的sql语句又无法减少服务器执行的时间，这 ...
分类：
数据库 时间：
2020-04-24 17:22:49
阅读次数：
121
阿里作为互联网的龙头，一直是互联网风向标的存在，很多的互联网公司无论是体系设计还是面试问题，都在向他靠拢，或者说模仿，但是阿里真的就那么神秘和高不可攀嘛？不一定的，最近跟一个刚获得支付宝offer的读者进行交流，它跟我说了他面试的时候遇到的问题，结合之前在网上看到的一些面试题，突然发现，其实除了一些比较偏门的，大部分基本就是涵盖的那几个方面，我总结就是6+2，来看看这些问题吧01支付宝一面介绍一下
分类：
编程语言 时间：
2020-04-23 14:59:10
阅读次数：
209
