前言:该文章是基于 Hadoop2.7.6_01_部署 进行的。 1. Hive基本概念 1.1. 什么是Hive Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能。 1.2. 为什么使用Hive 直接使用hadoop所面临的问题 人员学 ...
分类:
其他好文 时间:
2018-07-22 11:29:38
阅读次数:
142
1.Hive简介 Hive是一个基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一个表。并提供类SQL查询功能, 可以将sql语句转换为MapReduce任务运行。其优点是学习成本低,可以通过类SQL语句快速实现简单的MapReduce 统计,不必开发专门的MapReduce应用,十 ...
分类:
其他好文 时间:
2018-07-05 17:15:37
阅读次数:
110
1.构建config-server 创建一个pom.xml application.properties 启动服务,浏览器输入http://localhost:8888/foo/dev,得到下图结果表示config状态正常,可以远程取用配置文件了 http请求地址和资源文件映射如下: /{appli ...
分类:
编程语言 时间:
2018-06-22 13:33:05
阅读次数:
171
WEB:一个海量分布式客户端/f服务器信息系统 HTTP:是一个不堆成的请求-相应客户端-服务器协议。HTTP客户端向HTTP服务器发送请求消息,服务器反过来响应消息。换句话说,HTTP是一种拉协议,客户机拉动从所属服务器信息(而不是服务器推送信息到客户端) HTTP特点:1.无状态;2,允许协商数 ...
分类:
Web程序 时间:
2018-06-20 14:28:41
阅读次数:
1480
Linux 支持两种方式的共享内存:System V 和 POSIX 共享内存。 1. POSIX 共享内存 1.1 POSIX 共享内存的由来 System V 共享内存和共享文件映射的不足: System V 共享内存模型使用的是键和标识符,这与标准的 UNIX I/O 模型使用文件名和描述符的 ...
分类:
系统相关 时间:
2018-06-16 13:37:53
阅读次数:
247
前言:Hive可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能。在学习Hive之前我们先了解下结构化数据,半结构化数据以及非结构化数据的区别。1.结构化数据结构化的数据是指可以使用关系型数据库表示和存储,表现为二维形式的数据。一般特点是:数据以行为单位,一行数据表示一个实体的信息,每一行数据的属性是相同的。举一个例子:idnameagegender1lyh12male2liangy
分类:
其他好文 时间:
2018-06-01 17:36:44
阅读次数:
169
hibernate是一个开源的对象关系映射框架(ORM)。对JDBC进行了轻量级的封装。将对象和数据库表建立映射关系,hibernate框架使用在数据持久化层(DAO)。 ORM:对象关系映射(Object Relational Mapping)。采用配置文件映射元数据来描述对象关系的映射细节。 第 ...
分类:
Web程序 时间:
2018-05-19 16:58:50
阅读次数:
261
8.1 存储映射介绍 8.1.1 概念 存储映射是一个磁盘文件与存储空间的一个缓存相映射,对缓存数据的读写就相应的完成了文件的读写。 文件操作部分映射到虚拟内存的一块区域,我们对虚拟内存映射的那块区域进行读写操作,读写之后,那块区域自动同步到文件当中。 4G空间分布: 共享内存映射区就是文件映射到的 ...
分类:
其他好文 时间:
2018-05-16 23:58:21
阅读次数:
295
hadoop是一堆开源软件的集合,下面把这些开源软件做个简单介绍ApacheHadoop:是Apache开源组织的一个分布式计算开源框架,是提供了一个分布式文件系统(HDFS)和支持MapReduce分布式计算的软件架构。ApacheHive:是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapR
分类:
其他好文 时间:
2018-05-14 15:42:46
阅读次数:
165
一.mybatis的使用 1.原始的dao开发,dao接口+dao实现类 2.使用mapper接口, mapper接口相当于dao的接口 配置文件分成两块(全局的配置文件,映射文件) mybatis的优势一部分是支持动态sql mybatis.xml头文件内容用于识别整个xml文件是否出错,如下: ...
分类:
其他好文 时间:
2018-04-12 19:53:22
阅读次数:
192