Alex 的 Hadoop 菜鸟教程: 第8课 Sqoop1 导入 Hbase 以及 Hive...
分类：
其他好文 时间：
2014-12-02 19:19:32
阅读次数：
259
Hive安装配置参考网址http://blog.yidooo.net/archives/apache-hive-installation.htmlhttp://www.cnblogs.com/linjiqin/archive/2013/03/04/2942402.htmlHbase In Actio...
分类：
其他好文 时间：
2014-12-02 18:45:26
阅读次数：
974
1.拷贝文件 ? 如果数据文件恰好是用户需要的格式，那么只需要拷贝文件或文件夹就可以。 hadoop fs –cp?source_path target_path ? 2.导出到本地文件系统 ? --不能使用insert into local directory来导出数据...
分类：
其他好文 时间：
2014-12-02 17:38:03
阅读次数：
137
文章来源：大牛笔记
HBase，一个NoSQL数据库，可存储大量非关系型数据。
HBase，可以用HBase shell进行操作，也可以用HBase Java api进行操作。HBase虽然是一个数据库，但是它的查询语句，很不太好用。要是能像使用Mysql等关系型数据库一样用sql语句操作HBase，那就很Perfect了。
现有工具有很多Hive，Tez，Impala，Shar...
分类：
数据库 时间：
2014-12-02 13:34:24
阅读次数：
783
0. 前置条件 1. 集群已经安装好Hadoop 2. 本次安装使用/usr/local作为安装目录 3. 专门为HIVE建立用户和用户组：hive:hive1.安装从官网下载apache-hive-0.14.0-bin.tar.gz以及apache-hive-0.14.0-src.tar.gz，后者主要用于build IWH的war包。将apache-hive-0.14.0-b...
分类：
其他好文 时间：
2014-12-02 09:01:59
阅读次数：
223
hive用left semi join替代in子查询的方式...
分类：
其他好文 时间：
2014-12-01 19:20:05
阅读次数：
535
loaddatalocalinpathoverwriteintotablestudent;关键字local表明数据从localdisk中读取，如果没有此关键字，则数据从hdfs中读龋关键字keyword表明先删除表中的数据，然后再插入数据。如果没有这个关键字，则表明是append的方式。Note:1.load不会检验要load的data是否符合shema..
分类：
其他好文 时间：
2014-11-30 17:08:30
阅读次数：
153
与hbase外部表（wizad_mdm_main）进行join出现问题：
CREATE TABLE wizad_mdm_dev_lmj_edition_result as
select *
from wizad_mdm_dev_lmj_20141120 as w
JOIN wizad_mdm_main as a ON (a.rowkey = w.guid);
程序启动后，死循环...
分类：
其他好文 时间：
2014-11-28 18:20:15
阅读次数：
198
1、hive数据仓库权限问题:set hive.warehouse.subdir.inherit.perms=true;2、HiveServer2的内存连接的个数越多压力越大，可以加大内存；可以通过-Xmx设置，在脚本中设置：-Xmx=2048m 甚至 -Xmx=4g3、关闭推测式任务：默认是打开的...
分类：
其他好文 时间：
2014-11-26 22:32:21
阅读次数：
571
1数据导入--------------
CREATE EXTERNAL TABLE wizad_mdm_dev_lmj_edition_20141120 (
cookie_id STRING,
guid STRING
) ROW FORMAT DELIMITED
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
stored a...
分类：
其他好文 时间：
2014-11-26 18:54:52
阅读次数：
272
