列出 hive的 所有库
sqoop list-databases --connect jdbc:mysql://localhost --username hive --password hive
列出所有的表
sqoop list-tables --connect jdbc:mysql://localhost/hive_metadata --username hive --passwo...
分类:
其他好文 时间:
2015-08-17 15:33:44
阅读次数:
130
sqoop安装:安装在一台节点上就可以了。1.上传sqoop2.安装和配置 在添加sqoop到环境变量 将数据库连接驱动拷贝到$SQOOP_HOME/lib里 3.使用 第一类:数据库中的数据导入到HDFS上 sqoop import --connect jdbc:mysql://192.168.1...
分类:
其他好文 时间:
2015-08-16 12:00:13
阅读次数:
131
课程主要涉及Hadoop Sqoop、Flume、Avro重要子项目的技术实战课程针对人群1、本课程适合于有一定java基础知识。对数据库和sql语句有一定了解,熟练使用linux系统的技术人员,特别适合于想换工作或寻求高薪职业的人士2、最好有Greenplum Hadoop、Hadoop2.0、Y...
分类:
其他好文 时间:
2015-08-10 21:59:28
阅读次数:
139
[Author]: kwu --- sqoop导入关系库更新联合主键的问题,把数据从hive中导入关系库,如果关系库表有联合主键的情况,且需要把新导入的数据更新原来的数据...
分类:
其他好文 时间:
2015-08-07 19:49:07
阅读次数:
144
一、安装:
上传到hadoop集群的某一个节点上,将sqoop压缩包解压即可直接使用;
二、配置:
将需要连接的数据库(比如Oracle、MySQL)的连接驱动拷贝到 sqoop目录的lib里;
三、配置mysql远程连接
GRANT ALL PRIVILEGES ON ekp_11.* TO 'root'@'192.168.1.10' IDENTIFIED BY '123...
分类:
数据库 时间:
2015-08-03 17:02:27
阅读次数:
318
[Author]: kwu ---
sqoop从关系库导出数据到hive,sqoop支持条件查询关系库中的数到hive数据仓库中,并且字段无须与hive表中的字段一致。...
分类:
其他好文 时间:
2015-07-31 20:27:38
阅读次数:
115
sqoop list-tables --connect jdbc:mysql://namenode01:3306/employees --username hive --password hive mysqlurl=jdbc:mysql://namenode01:3306/employees sqo...
分类:
其他好文 时间:
2015-07-26 12:36:14
阅读次数:
130
1、整库导入 sqoop ?import-all-tables --connect jdbc:mysql://ip:3306/dbname ?--username user --password password --hive-database abc ?-m 10 ?--create-hive-table ?--hive-import --hive-overwrite?...
分类:
其他好文 时间:
2015-07-21 19:08:53
阅读次数:
217
Mahout推荐算法API详解Hadoop家族系列文章,主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oo...
分类:
编程语言 时间:
2015-07-20 19:20:32
阅读次数:
168
简介SQOOP是用于对数据进行导入导出的。
(1)把MySQL、Oracle等数据库中的数据导入到HDFS、Hive、HBase中
(2)把HDFS、Hive、HBase中的数据导出到MySQL、Oracle等数据库中安装sqoop
解压sqoop
tar -zxvf sqoop-1.4.3.bin__hadoop-1.0.0.tar.gz
重命名
mv sqoop-1.4.3.b...
分类:
其他好文 时间:
2015-07-05 09:47:25
阅读次数:
117