1.database(数据库) 保存有组织的数据的容器,通常就是一个文件或者一组文件。 注意:不要把数据库这个词汇理解成数据库软件,数据库软件应该被称为数据库管理系统(DBMS)。 2.table(表) 某种特定类型数据的结构化清单。 一个数据库内的每个表都有唯一的表名。 模式(schema)用来描... ...
分类:
数据库 时间:
2019-02-04 08:55:31
阅读次数:
157
HBase简介:分布式数据库是构建在HDFS上的分布式列存储数据库(Mysql,Oracle是行数据库),是一个高可靠性,高性能,面向列。可伸缩的分布式存储系统 列式存储允许用户存储海量的数据到相同表中,而在传统数据库中,海量数据需要被切分为多个表进行存储行键 不宜过长,否则会占用大量的存储空间降低 ...
分类:
其他好文 时间:
2019-01-28 16:10:18
阅读次数:
236
st表--目的是解决RMQ问题(多次询问区间最值) 既然叫‘表’,那肯定要打个表,然后你问什么,我就在表里找就可以了,这样,询问时的时间复杂度就是O(n)。 妈妈再也不用担心我会超时了 设你把一个需要处理的序列存储在a [ i ] 中 s tiao表,首先要声明一个二维数组jump[i][j] or ...
分类:
其他好文 时间:
2019-01-20 15:56:59
阅读次数:
526
1.hbase的简介:??HBASE是bigTable,(源代码是Java编写)的开源版本,是ApacheHadoop的数据库,是建立在hdfs之上,被设计用来提供高可靠性,高性能、列存储、可伸缩、多版本,的Nosql的分布式数据存储系统,实现对大型数据的实时,随机的读写请求。更是弥补了hive不能低延迟、以及行级别的增删改的缺点。??HBASE依赖于hdf
分类:
其他好文 时间:
2019-01-15 12:06:06
阅读次数:
752
聚合实际上对数据做分组统计,SQL Server使用两种操作符来实现聚合,流聚合(Stream Aggregation)和哈希聚合(Hash aggration)。流聚合是非阻塞性的,具有流的特性,流聚合操作符;边处理数据,边输出聚合的结果。而哈希聚合是阻塞性的,只要处理完所有的数据,才会输出聚合的 ...
分类:
其他好文 时间:
2019-01-15 10:38:51
阅读次数:
183
1.hashCode存在的意义在于查找的快捷性,如Hashtable,HashMap等。hashCode是用来在散列存储结构中确定对象的存储地址的。 2.两个对象如果相同,那么两个对象的hash'Code一定要相同。 3.如果对象的equals方法被重写,那么对象的hashCode也重写,并且产生h ...
分类:
编程语言 时间:
2019-01-15 00:46:56
阅读次数:
213
引入 程序设计语言基本数据类型:int,float,char Python内置数据结构:list,dict,tuple. Python扩展数据结构:栈,队列 存储一个student的name,age,hometown的方式 经典知识点总结 1.算法与数据结构的概念 2.数据结构和算法的区别 3.抽象 ...
分类:
编程语言 时间:
2019-01-07 00:19:07
阅读次数:
181
hbase是一个构建在hdfs上的分布式列存储系统;hbase是apachehadoop生态系统中的重要一员,主要用于海量结构化数据存储从逻辑上讲,hbase将数据按照表、行和列进行存储hbase表特点: 1.大:一个表可以有数十亿行,上百万列; 2.无模式:每行都有一个可排序的主键和任意多的列,列可以根据需要动态的增加,同一张表中不同的行可以有截然不同的列; 3.面向列:面向列(族)的存储
分类:
其他好文 时间:
2019-01-02 19:04:13
阅读次数:
179
Hive支持的存储数据的格式主要有:TEXTFILE 、SEQUENCEFILE、ORC、PARQUET 一. 列式存储和行式存储 左边为逻辑表,右边第一个为行式存储,第二个为列式存储 1. 行式存储的特点 查询满足条件的一整行数据的时候,列存储则需要去每个聚集的字段找到对应的每个列的值,行存储只需 ...
分类:
其他好文 时间:
2018-12-23 23:59:36
阅读次数:
343
上个月参加了一个云存储的技术讨论会。这一个月里,陆续收到几位同学讨论大数据保存和处理的邮件。今天是周末,索性把这个月的交流内容整理写下来,供各位参考。 目前大数据存储有两种方案可供选择:行存储和列存储。业界对两种存储方案有很多争持,集中焦点是: 谁能够更有效地处理海量数据,且兼顾安全、可靠、完整性。 ...
分类:
其他好文 时间:
2018-12-19 12:57:10
阅读次数:
178