一、Parquet的组成 Parquet仅仅是一种存储格式，它是语言、平台无关的，并且不需要和任何一种数据处理框架绑定，目前能够和Parquet适配的组件包括下面这些，可以看出基本上通常使用的查询引擎和计算框架都已适配，并且可以很方便的将其它序列化工具生成的数据转换成Parquet格式。 查询引擎: ...
分类：
其他好文 时间：
2018-07-18 23:13:28
阅读次数：
212
MongDB简介MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。它支持的数据结构非常松散，是类似json的bson格式，因此可以存储比较复杂的数据类型。Mongo最大的特点是它支持的查询语言非常强大，其语法有点类似于面向对
分类：
数据库 时间：
2018-07-18 16:55:32
阅读次数：
370
hive文件存储格式包括以下几类： 1、TEXTFILE 2、SEQUENCEFILE 3、RCFILE 4、ORCFILE(0.11以后出现) 其中TEXTFILE为默认格式，建表时不指定默认为这个格式，导入数据时会直接把数据文件拷贝到hdfs上不进行处理； SEQUENCEFILE，RCFILE ...
分类：
其他好文 时间：
2018-07-18 14:13:14
阅读次数：
179
MyISAM：每个MyISAM在磁盘上存储成三个文件。第一个文件的名字以表的名字开始，扩展名指出文件类型。.frm文件存储表定义。数据文件的扩展名为.MYD (MYData)。索引文件的扩展名是.MYI (MYIndex)。InnoDB：所有的表都保存在同一个数据文件中（也可能是多个文件，或者是独立 ...
分类：
数据库 时间：
2018-07-18 13:59:03
阅读次数：
185
MongoDB简介MongoDB时一款跨平台、面向文档的数据库。可以实现高性能、高可用性，并且能够轻松扩展。是一个基于分布式文件存储的开源数据库系统，在高负载情况下，添加更多节点，可以保证服务器性能。MongoDB的特点MongoDB的特点包括面向集合存储、模式自由、丰富的查询语句和多级索引、复制集机制、易于水平扩展、可插入存储引擎、跨平台多语言支持等。MongoDB安装简单，提供了面向文档存储功
分类：
数据库 时间：
2018-07-17 23:32:45
阅读次数：
432
前言 工作需要，第一次使用 Go 来实战项目。 需求：采用 golang 实现一个 webapi 的中转网关，将一些资源文件通过 http 协议上传至 FastDFS 分布式文件存储系统。 一、FastDFS 与 golang 对接的代码 github：https://github.com/weil ...
分类：
编程语言 时间：
2018-07-17 16:39:42
阅读次数：
287
MongoDB安装及多实例启动MongoDB简介MongoDB是一款跨平台、面向文档的数据库。可以实现高性能、高可用性，并且能够轻松扩展，是一个基于分布式文件存储的开源数据库系统，在高负载的情况下，添加更多的节点可以保证服务器的性能。在大数据时代中，大数据量的处理已经成了考量一个数据库最重要的原因之一。MongoDB的一个主要目标就是尽可能的让数据库保持卓越的性能，这很大程度地决定了MongoDB
分类：
数据库 时间：
2018-07-16 22:14:25
阅读次数：
323
1.src/resources路径下新建logback.xml 控制台彩色日志打印 info日志和异常日志分不同文件存储 每天自动生成日志 结合myibatis方便日志打印（debug模式） 2.定义一个log实体 方便维护和后续的扩展 3.定义一个controller 的切面 4.定义一个供dub ...
分类：
编程语言 时间：
2018-07-16 21:08:38
阅读次数：
272
Centos7下完整安装mongodb3.6.6mongodb介绍MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。它支持的数据结构非常松散，是类似json的bson格式，因此可以存储比较复杂的数据类型。Mongo最大的特点
分类：
数据库 时间：
2018-07-16 21:07:40
阅读次数：
356
Centos7下mongodb3.6.6的基本操作mongodb介绍MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。它支持的数据结构非常松散，是类似json的bson格式，因此可以存储比较复杂的数据类型。Mongo最大的特
分类：
数据库 时间：
2018-07-16 21:05:45
阅读次数：
366
