1. 什么是Hive Hive：由Facebook开源用于解决海量结构化日志的数据统计。 Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。 本质是：将HQL转化成MapReduce程序 1）Hive处理的数据存储在HDFS 2）Hive分析数 ...
分类：
其他好文 时间：
2019-12-27 13:08:13
阅读次数：
92
1、properties文件内容映射到类对象(属性)，如Resource目录下的1.properties文件已配置前缀为com.imooc.people相关的信息，然后： pom添加依赖：springboot-configuration-processor People类对象上方添加注解： @Con ...
分类：
其他好文 时间：
2019-12-26 00:09:05
阅读次数：
283
1、首先先在laravel根目录下执行 $ php artisan storage:link ，产生映射文件 2、编写controller层 3、编写路由 4、用 postman 模拟请求，注意红框部分，必须要两个不一样的字段才能产生两个文件 ...
分类：
Web程序 时间：
2019-12-23 17:08:56
阅读次数：
97
Hive与HBase的区别与联系 二者区别 Hive：Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能。 HBase：HBase是Hadoop的数据库，一个分布式、可扩展、大数据的存储。 二者联系 Hbase和Hive在大数据架构中处 ...
分类：
其他好文 时间：
2019-12-22 18:19:49
阅读次数：
84
从使用方面讲 Hive是一个构建在Hadoop平台上的数据仓库，可以将结构化的数据文件映射为一张数据库表。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言，这种语言最终被转化成Map/Reduce。 HBase 是基于HDFS平台的Key/Value类型的NoSql ...
分类：
其他好文 时间：
2019-12-14 15:36:27
阅读次数：
95
什么是Hive Hive是由Facebook开源用于解决海量结构化日志的数据统计；Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射 成一张表，并提供类SQL查询功能，底层计算引擎默认为Hadoop的MapReduce（本质是将sql转化成mapreduce程序），可以将引擎更 ...
分类：
其他好文 时间：
2019-12-14 15:25:15
阅读次数：
129
常用命令：1、init：创建一个alembic仓库2、reversion：创建一个新的版本3、--autogenerate：自动将当前模型的修改，生成迁移脚本4、-m：message，可以记录本次迁移做了哪些修改，5、upgrade：将指定版本的迁移文件映射到数据库中，会执行版本文件中的upgrad ...
分类：
数据库 时间：
2019-11-10 22:32:46
阅读次数：
163
一、概述1、什么是hive?由Facebook开源用于解决海量结构化日志的数据统计。是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。本质上其实就是将HQL/SQL转化为MapReduce或者spark任务执行，然后返回结果。有以下几个本质：1）Hive处理的数据存储在HDFS。默认在在/user/hive/warehouse/<databas
分类：
其他好文 时间：
2019-11-03 14:40:54
阅读次数：
85
概述RocketMQ存储中主要用到以下知识点：mmap 文件映射内存池异步刷盘consumeQueue同时本节将介绍各个重要的类，本篇文章将介绍 mmap 文件映射的相关方法和内存池相关知识点，刷盘和 consumeQueue 相关知识点在下篇介绍。MappedFilemappedFile 对应着底... ...
分类：
其他好文 时间：
2019-11-03 14:36:20
阅读次数：
92
一、Compose简介Compose是用于定义和运行多容器Docker应用程序的工具。通过Compose，可以使用YAML文件来配置应用程序的服务。然后，使用一个命令，就可以从配置中创建并启动所有服务。Docker-Compose是一个容器编排工具。通过一个.yml或.yaml文件，将所有的容器的部署方法、文件映射、容器端口映射等情况写在一个配置文件里，执行docker-composeup命令就像
分类：
其他好文 时间：
2019-11-01 14:32:51
阅读次数：
130
