分布式系统实践 1. 列存储格式Parquet调研报告 http://dwz.cn/4HnU24 摘要: Apache Parquet是Hadoop生态圈中一种新型列式存储格式,它可以兼容Hadoop生态圈中大多数计算框架(Hadoop、Spark等),被多种查询引擎支持(Hive、Impala、D ...
分类:
其他好文 时间:
2016-12-04 09:40:28
阅读次数:
149
业务需求:用户通过checkbox选择筛选条件,根据用户选择的条件查询出相应的数据 数据存储格式:“1,2,3,4” 传入参数格式:“1,3” 难点:1.用户选择的筛选条件是不确定的 2.要是实现参数和数据库信息一一对比 思路:因为参数数量不确定,那么就考虑动态参数。 那么问题来了,懂ef的都知道动 ...
分类:
其他好文 时间:
2016-11-29 21:22:16
阅读次数:
169
一、QSettings介绍:用户通常希望应用程序记住其设置。在windows中,这些设置保存在注册表中,ios在属性文件列表中,而unix,在缺乏标准的情况下,其存储在ini文本中。QSettings有两种存储格式:QSettings::NativeFormat(在windows平台可读写注册表)、QSettings::IniFormat(..
分类:
其他好文 时间:
2016-11-28 17:50:08
阅读次数:
534
Hive文件存储格式包括以下几类: 1、TEXTFILE 2、SEQUENCEFILE 3、RCFILE 4、ORCFILE 其中TEXTFILE为默认格式,建表时不指定默认为这个格式,导入数据时会直接把数据文件拷贝到hdfs上不进行处理。 SEQUENCEFILE,RCFILE,ORCFILE格式 ...
分类:
其他好文 时间:
2016-11-26 11:59:53
阅读次数:
420
1、protobuf是google公司提出的数据存储格式,详细介绍可以参考:https://code.google.com/p/protobuf/ 2、下载最新的protobuf,下载地址:https://code.google.com/p/protobuf/downloads/list 3、下载p ...
分类:
其他好文 时间:
2016-11-26 11:38:34
阅读次数:
165
1.本次课学习到的知识点: (1)本次课通过从数据在计算机内的存储格式入手,介绍整型、字符型、单精度和双精度实型四种基本数据类型的存储方式。通过实例介绍了四种基本数据类型的定义、取值范围及其常量形式,要求重点掌握ASCII 字符集和转义字符的应用。 (2)通过实例介绍了在C 语言中如何通过函数调用完 ...
分类:
其他好文 时间:
2016-11-18 00:13:05
阅读次数:
174
wkt(OGC well-known text)和wkb(OGC well-known binary)是OGC制定的空间数据的组织规范,wkt是以文本形式描述,wkb是以二进制形式描述。使用wkt和wkb能够很好到和其他系统进行数据交换,目前大部分支持空间数据存储的数据库构造空间数据都采用这两种方式 ...
分类:
其他好文 时间:
2016-11-17 19:27:12
阅读次数:
394
前面的话 数据类型是指列、存储过程参数、表达式和局部变量的数据特征,它决定了数据的存储格式,代表了不同的信息类型。mysql中的数据类型主要包括整型、浮点型、日期时间型和字符型。下面来详细介绍mysql中的数据类型 整型 浮点型 日期时间 字符型 ...
分类:
数据库 时间:
2016-11-17 10:33:17
阅读次数:
185
1.存储格式 textfile rcfile orc parquet 2.存储方式 按行存储 -》textfile 按列存储 -》parquet 3.压缩比 4.存储textfile的原文件 并加载数据 5.大小 6.保存为tectfile,经过mapreduce 7.结果的大小 8.保存为orc格 ...
分类:
其他好文 时间:
2016-11-15 23:41:32
阅读次数:
253
一、本次课学习到的知识点: 1、本次课通过从数据在计算机内的存储格式入手,介绍整型、字符型、单精度和双精度实型四种基本数据类型的存储方式。 2、通过实例介绍了四种基本数据类型的定义、取值范围及其常量形式,要求重点掌握ASCII 字符集和转义字符的应用。 3、通过实例介绍了在C 语言中如何通过函数调用 ...
分类:
其他好文 时间:
2016-11-13 01:27:13
阅读次数:
206