Hive的优化策略大致分为:配置优化(hive-site.xml和hive-cli执行前配置)、表优化、hive数据倾斜解决方案。 回答的时候需要,需要准确的说出具体的配置参数,准确的说出具体的配置参数,这是一个深刻的教训。 配置优化 1-Fetch抓取配置 Fetch抓取是指,Hive中对某些情况 ...
分类:
其他好文 时间:
2019-12-14 15:44:09
阅读次数:
109
对于初始没有进行编号,且要求数字小的尽可能在前面 需要进行反向拓扑排序 真的看不懂 反正需要进行 邻接表优化 "传送门" "传送门" ...
分类:
编程语言 时间:
2019-12-09 21:20:09
阅读次数:
103
MySQL优化1、SQL语句优化2、索引优化3、数据库结构优化4、InnoDB表优化5、MyISAM表优化6、Memory表优化7、理解查询执行计划8、缓冲和缓存9、锁优化10、MySQL服务器优化11、性能评估12、MySQL优化内幕
分类:
数据库 时间:
2019-11-10 22:44:28
阅读次数:
101
[toc] 1 背景 随着用户不断下单,DB订单表和订单附属表的单表记录数过大,影响到前端和管理系统拉取订单列表的性能。单表最大多少行合适与具体业务有关,难以下定论,但一般推荐不要超过1千万行,之后单表的性能下降会比较明显。 本文档整理了数据库大表优化的一些常用思路的原理,最后针对订单表提出优化方案 ...
分类:
其他好文 时间:
2019-11-02 22:14:45
阅读次数:
96
看见异或两个字就孩怕 T1 按位? T2 这道异或稍水啊233 貌似可以打表找找规律 emm七种转移,有重复刷表 优化一下? T3 skyh已经接了2杯水了(实际情况他已经ak了) cbx开始抬头傻笑了 完了戏了T3还没思路(什么类似的题我都白做了 平凡优化,平凡优化。。 拆abs,前缀max,挺平 ...
分类:
其他好文 时间:
2019-10-25 10:00:41
阅读次数:
89
我。。。 行吧大概说说。 T1打的n2dp,什么随机化什么改变读入顺序都能AC。 没想优化。打了个链表优化dp。不知为何WA了。 T2读错题,死了。 T3的50分暴力没来得及优化感觉思路很神仙(然而并没有特别神仙) 打了3个对拍,T1还是一个spj对拍。然后各种AC。。。 T2读错了题对拍显然也是错 ...
分类:
其他好文 时间:
2019-09-19 12:34:43
阅读次数:
111
问题概述 使用阿里云rds for MySQL数据库(就是MySQL5.6版本),有个用户上网记录表6个月的数据量近2000万,保留最近一年的数据量达到4000万,查询速度极慢,日常卡死。严重影响业务。 问题前提:老系统,当时设计系统的人大概是大学没毕业,表设计和sql语句写的不仅仅是垃圾,简直无法 ...
分类:
数据库 时间:
2019-08-23 19:36:53
阅读次数:
159
合并 k 个排序链表,返回合并后的排序链表。请分析和描述算法的复杂度。 首先我想到的是两两合并,分析时间大概是接近O(n^2)了。leecode显示需要200ms. 后来借鉴了快速排序的思想。优化了一点时间,能够达到48ms。感觉还不是很满意。 ...
分类:
其他好文 时间:
2019-08-03 00:14:18
阅读次数:
111
当MySQL单表记录数过大时,增删改查性能都会急剧下降,可以参考以下步骤来优化: 单表优化 除非单表数据未来会一直不断上涨,否则不要一开始就考虑拆分,拆分会带来逻辑、部署、运维的各种复杂度,一般以整型值为主的表在千万级以下,字符串为主的表在五百万以下是没有太大问题的。而事实上很多时候MySQL单表的 ...
分类:
数据库 时间:
2019-06-12 15:17:27
阅读次数:
126