Hive分区表数据的上传与导出 1. 前言 ? 经过前两篇的练习，我们练习了文件的上传与下载，以及Hive外部表数据的上传与导出。但是很多时候Hive的数据操作不仅仅是外部表，还有可能是对分区表的操作。接下来，就对分区表的数据操作进行练习。 2. 分区表的文件结构 1）创建一个分区表，分区字段为co ...
分类：
其他好文 时间：
2019-03-18 16:52:04
阅读次数：
516
近期准备将一个项目开源到GitHub中，N-Sharding，.Net版本的分库分表数据访问框架。中间遇到了点小问题，整理了一下。 1. GitHub上Create New Repos 2. 代码Check In到本地Git Repos 3. Push到GitHub远程Repos 一、GitHub上 ...
分类：
其他好文 时间：
2019-03-17 11:05:45
阅读次数：
260
今天给大家带来的讨论主题是通过实战经验来对百亿数据量下的多表数据查询进行优化，俗话说的好，一切脱离业务的架构都是耍流氓，接下来我就整理一下今天早上微信群里石头哥给大家分享的百亿数据量多表查询架构以及优化思路。由于本文内容整理自微信群，爬楼不易，整理更不易，如果有遗漏，欢迎大家在评论区留言。 作者：依 ...
分类：
其他好文 时间：
2019-03-14 15:16:27
阅读次数：
168
1：表数据。 2：选择 select result: 2: insert ...
分类：
数据库 时间：
2019-03-14 13:29:17
阅读次数：
169
01数据库概念 A: 什么是数据库 数据库就是存储数据的仓库，其本质是一个文件系统，数据按照特定的格式将数据存储起来， 用户可以对数据库中的数据进行增加，修改，删除及查询操作。 B: 什么是数据库管理系统 数据库管理系统（DataBase Management System，DBMS）：指一种操作和 ...
分类：
数据库 时间：
2019-03-14 11:47:23
阅读次数：
183
1、需求 更新一对多表中的附表数据,表结构如下： 2、思路 个人觉得一个个去对比关联的附表数据是删除还是添加比较麻烦，就直接清空主表关联的附表，然后重新建立关联关系。 3、弊端 如果附表还关联着其它表就会丢失他们之间的关联关系 4、主要代码 5、注意事项 1）、红色代码可加可不加，不添加会产生冗余数 ...
分类：
其他好文 时间：
2019-03-14 10:34:30
阅读次数：
385
SQL左右连接中的on and和on where的区别 左联时，ON后面的对左边表的条件对左边表数据无影响（因为左连接符合左边所有条件），但对右边表数据有影响，只有符合左边表条件时，右边表数据才会查出来where 后面对两个表都有影响（影响全局的） 简单一句话：on and：符合左表所有条件，on ...
分类：
数据库 时间：
2019-03-13 15:17:03
阅读次数：
339
小结： 1、线性链表、静态链表 《数据结构》严 ...
分类：
其他好文 时间：
2019-03-13 15:11:01
阅读次数：
187
创建两张表，代表两个店铺，每个店铺有不同的，每个柜台卖不同的商品。 两个表数据如下： 1.内连接 运行结果 2.左连接 运行结果 3.右连接 运行结果 4.左外连接 运行结果 5.右外连接 6.全连接 mysql不支持full (outer) join 故使用union代替 运行结果 7.全外连接 ...
分类：
数据库 时间：
2019-03-12 18:45:48
阅读次数：
239
书后有71条参考文献，作者自己的研究成果、数据、观点比较少。可以算是行业资料的综述。 书中还有不少篇幅照搬一些公众号的菜单甚至截屏，有点资料堆砌的味道。 有一些行业相关的数据与图表。数据貌似都比较旧，最新的也是截至2018年6月的，旧的还有截至2017年的。 基本内容行业内的重要的企业与大V的主要知 ...
分类：
其他好文 时间：
2019-03-12 18:23:57
阅读次数：
195
