转 问题概述 使用阿里云rds for MySQL数据库(就是MySQL5.6版本),有个用户上网记录表6个月的数据量近2000万,保留最近一年的数据量达到4000万,查询速度极慢,日常卡死。严重影响业务。 问题前提:老系统,当时设计系统的人大概是大学没毕业,表设计和sql语句写的不仅仅是垃圾,简直 ...
分类:
数据库 时间:
2020-08-11 15:50:35
阅读次数:
70
概述透视表是依据已有数据源来创建的交互式表格,我们可在excel中创建透视表,也可编辑已有透视表。本文以刷新透视表以及设置透视表中的行折叠或展开为例介绍如何编辑已有透视表。所需工具:FreeSpire.XLSforJava免费版,编辑代码前,先下载导入jar到Java程序(可手动下载导入,或通过Maven仓库下载导入)。示例代码刷新Excel透视表默认情况下,源数据的更改变动不会自动更新到透视表,
分类:
编程语言 时间:
2020-08-10 18:41:33
阅读次数:
76
前段时间做了一些powerbi的开发工作,整理一下开发的大致步骤: 1.明确主题 2.设计数据模型:星型模型下设计事实表,维度表,数据粒度 3.整理源数据,获取源数据:文本文件,EXCEL,CSV,DB 4.在查询编辑器清洗数据,加工数据,聚合数据,简单的操作可以使用自带的图形化功能,复杂的操作(比 ...
分类:
其他好文 时间:
2020-08-08 00:32:41
阅读次数:
66
复习: 1、什么是数据结构 是专门研究数据关系和操作的学科,而非是计算方法。 数据结构+算法=程序 2、逻辑结构和物理结构 逻辑结构: 集合:除了同属于一个集合,数据之间没有任何关系。 表:数据之间存在一对一关系。 树:数据之间存在一对多关系。 图:数据之间存在多对多关系。 物理结构: 顺序结构:数 ...
分类:
其他好文 时间:
2020-08-07 00:26:31
阅读次数:
78
阅读目录 栈 stack 队列 链表 数组 字典实现原理 NSDictionary 树 B-tree/B+tree 栈 stack 栈(stack)又名堆栈,它是一种运算受限的线性表。限定仅在表尾进行插入和删除操作的线性表。这一端被称为栈顶,把另一端称为栈底。向一个栈插入新元素又称作 进栈、入栈或压 ...
分类:
其他好文 时间:
2020-08-06 16:59:20
阅读次数:
67
在一个罕见的数据分析领导者聚会中,各种新的解决方案渐渐浮出水面,这些方案旨在解决人才,组织和前沿采用等一系列难题。作者:BradBrown来源:企业网D1Net|2020-08-0410:01收藏分享去年10月,来自数据分析领域的先进企业的八位高管就自己所面临的最大难题发表了看法。他们都是公司中负责数据分析工作的最高管理人员,其中包括美国国际集团(AIG)、美国运通、三星移动、西门子医疗,TDBa
分类:
其他好文 时间:
2020-08-05 10:43:43
阅读次数:
70
Sharding-Proxy定位为透明化的数据库代理端,提供封装了数据库二进制协议的服务端版本,用于完成对异构语言的支持。 目前先提供MySQL/PostgreSQL版本,它可以使用任何兼容MySQL/PostgreSQL协议的访问客户端。本文主要介绍Sharding-Proxy的基本使用,文中使用 ...
分类:
其他好文 时间:
2020-08-03 23:06:39
阅读次数:
135
第一步:读取三个表数据(用户表、评分表、电影表) mnames=['MovieID','Title','Genres'] user_data = pd.read_table(r".\datas\movielens-1m\users.dat", sep='::', header=None, names ...
分类:
其他好文 时间:
2020-08-01 21:29:14
阅读次数:
83
数据库对象: 表 :基本的数据存储集合,行+列 视图:相关的数据集合 序列:提供有规律的数值 索引:提高查询效率 同义词:给对象起别名 命名规则: 表名和列名: ?必须以字母开头 ?必须在 1–30 个字符之间 ?必须只能包含 A–Z, a–z, 0–9, _, $, 和 # ?必须不能和用户定义的 ...
分类:
其他好文 时间:
2020-08-01 14:38:39
阅读次数:
124