1. 准备测试数据 2. 创建用户2.1. 创建系统用户在集群所有节点创建系统用户并设置密码 2.2. 创建kerberos用户 3. 创建数据库和表3.1. 创建数据库admin为sentry的超级管理员，该用户配置权限时已设置 通过beeline连接 hiveserver2，运行下面命令创建hi ...
分类：
其他好文 时间：
2016-10-17 06:50:47
阅读次数：
285
1 启动 hiveserver2 服务，启动 beeline -u jdbc:hive2:// 正常 ，启动 beeline -u jdbc:hive2://127.0.0.1:10000 包如下错误 Error: Failed to open new session: java.lang.Runt ...
分类：
其他好文 时间：
2016-08-19 14:46:34
阅读次数：
403
我们知道在Spark中可以通过start-thriftServer.sh 来启动ThriftServer，之后并可以通过beeline或者JDBC来连接并执行Spark SQL。在一般的Spark应用中，通常并不希望另外起一个服务进程，自然就要问：可以在Spark dirver program里启一 ...
分类：
其他好文 时间：
2016-07-12 19:05:50
阅读次数：
137
本程序主要实现hive权限测试。系统中有管理员用户single和测试用户test。在路径/home/test/下，将用例和预期结果写在xml文件中。执
行过程：kinitsingle用户，beeline-u-e登录并执行对test用户对应角色回收和赋予权限的语句；kinit
test用户，beeline-u
-e去执行测试语句并保存..
分类：
编程语言 时间：
2016-06-07 16:31:43
阅读次数：
1105
背景我们使用的HiveServer2的版本为0.13.1-cdh5.3.2，目前的任务使用Hive SQL构建，分为两种类型：手动任务（临时分析需求）、调度任务（常规分析需求），两者均通过我们的Web系统进行提交。以前两种类型的任务都被提交至Yarn中一个名称为“hive”的队列，为了避免两种类型的...
分类：
数据库 时间：
2015-08-12 18:40:43
阅读次数：
9623
最近使用SparkSQL做数据的打平操作，就是把多个表的数据经过关联操作导入到一个表中，这样数据查询的过程中就不需要在多个表中查询了，在数据量大的情况下，这样大大提高了查询效率。我启动了thriftserver,然后通过beeline去连接thriftserver， 打平操作进行的很顺利，但是在执行...
分类：
其他好文 时间：
2015-08-09 00:24:31
阅读次数：
329
遇到的坑：1、Hive的任务会从临时目录移动数据到数据仓库目录，默认hive使用/tmp作为临时目录，用户通常使用/user/hive/warehouse/作为数据仓库目录。在FederatedHDFS情况下，/tmp和/user视为两个不同的ViewFSmounttable，所以hive任务在这两个目录之间移动数据。FederatedHDFS..
分类：
其他好文 时间：
2015-07-30 15:11:51
阅读次数：
1079
Hive cli vs beelineThe primary difference between the two involves how the clients connect to Hive.The Hive CLI connects directly to the Hive Driver a...
分类：
其他好文 时间：
2015-07-24 08:03:51
阅读次数：
189
近期，大数据开发环境升级为cloudera 5.3. 配套的hive版本升级为0.13.1.可以使用心仪已久的分析开窗函数了。但在使用的过程中发现一些问题，仅记于此。1.在使用hive命令的时候，发现自动跳转至beeline客户端，并且提示hive cli已经过期，推荐使用beeline.然后提示你...
分类：
其他好文 时间：
2015-07-23 08:12:15
阅读次数：
754
Beeline – 一个新的命令行Shell
HiveServer2 supports a new command shell Beeline that works with HiveServer2. It's a JDBC client that is based on the SQLLine CLI (http://sqlline.sourceforge.net/).
There’s...
分类：
其他好文 时间：
2015-05-19 16:39:57
阅读次数：
391
