Apache Hive支持Apache Hadoop中使用的几种熟悉的文件格式,如TextFile,RCFile,SequenceFile,AVRO,ORC和Parquet格式。 Cloudera Impala也支持这些文件格式。 在建表时使用STORED AS (TextFile|RCFile|S ...
分类:
其他好文 时间:
2019-11-18 18:42:00
阅读次数:
109
1、本文章主要写的是关于HFile里面键值对的剖析 先来看看HFile的存储格式 HFile的文件是不定长的,长度固定的只有两块,就是Traifer和File info。 Data块的是由Magic和键值对组成,Magic主要是生成一些随机数来防止数据的损坏,其他的就是键值对。 上面我们大概的讲了一 ...
分类:
其他好文 时间:
2019-11-07 15:04:49
阅读次数:
121
一、TensorFlow Lite 二、tflite格式 TensorFlow 生成的模型是无法直接给移动端使用的,需要离线转换成.tflite文件格式。 tflite 存储格式是 flatbuffers。 因此,如果要给移动端使用的话,必须把 TensorFlow 训练好的 protobuf 模型 ...
分类:
移动开发 时间:
2019-10-30 19:59:19
阅读次数:
136
原文链接 点云数据结构 点云数据结构非常简单,只有点的三维坐标信息和法线信息。下面是一个点云表示的抽象类: 点云顶点的存储格式一般是线性的,获取方便,但是删除会存在一些效率问题。IPointCloud提供了SwapPoint函数把需要删除的元素交换到尾部,然后再通过PopbackPoints删除尾部 ...
分类:
其他好文 时间:
2019-10-27 10:37:14
阅读次数:
100
一、MySQL中 日期和时间类型 表示时间值的日期和时间类型为 DATETIME、DATE、TIMESTAMP、TIME和YEAR。 每个时间类型有一个有效值范围和一个"零"值,当指定不合法的MySQL不能表示的值时使用"零"值。 TIMESTAMP类型有专有的自动更新特性。 类型 大小(字节) 范 ...
分类:
数据库 时间:
2019-10-24 21:39:56
阅读次数:
111
Hash操作 hash表现形式上有些像python中的dict,可以存储一组关联性较强的数据,redis中Hash在内存中的存储格式如下图: 1、hset(name,key,value) 2、hmset(name,mapping) 3、hget(name,key) 4、hmget(name,keys ...
分类:
数据库 时间:
2019-10-20 17:53:04
阅读次数:
102
一、Github代码链接 repo 二、程序基本功能描述 1.获得北京地铁单条线路所有站点信息 2.获得两个站点间最短线路 3.获得图的基本信息 4.帮助,命令行详解 三、北京地铁线路存储格式 线路以文本文件形式存放,具体格式如下: 其中环形线路,头站点在尾部再加上首站点即可。 对于读取通过json ...
分类:
其他好文 时间:
2019-10-13 19:11:35
阅读次数:
124
一、hive文件存储格式 Hive支持的存储数的格式主要有:TEXTFILE 、SEQUENCEFILE、ORC、PARQUET。 上图左边为逻辑表,右边第一个为行式存储,第二个为列式存储。 行存储的特点: 查询满足条件的一整行数据的时候,列存储则需要去每个聚集的字段找到对应的每个列的值,行存储只需 ...
分类:
其他好文 时间:
2019-10-03 14:40:32
阅读次数:
87
word文档的两种存储格式:doc和docx doc:习惯上被称为word,采用二进制存储数据 docx:也就是word2007,采用xml存储数据 那么后缀明明是docx格式的,为什么成xml格式了? ... 你认为的docx文档,其实是一个压缩文件~ 具体转这篇博文: https://www.c ...
分类:
Web程序 时间:
2019-10-03 12:47:49
阅读次数:
199
Hive 主流文件存储格式对比 1、存储文件的压缩比测试 创建表,存储数据格式为TextFile 创建表,存储数据格式为TextFile 向表中加载数据 向表中加载数据 查看表的数据量大小 查看表的数据量大小 创建表,存储数据格式为 parquet 创建表,存储数据格式为 parquet 向表中加载 ...
分类:
其他好文 时间:
2019-10-03 10:39:51
阅读次数:
96