码迷,mamicode.com
首页 > 数据库 > 详细

用sqoop将mysql的数据导入到hive表

时间:2018-06-19 23:25:20      阅读:324      评论:0      收藏:0      [点我收藏+]

标签:res   int   lis   address   char   class   nbsp   hdfs   --   

一、先将mysql一张表的数据用sqoop导入到hdfs

1.1、先在mysql中准备一张测试用的表

mysql> desc user_info;
+-----------+-------------+------+-----+---------+-------+
| Field     | Type        | Null | Key | Default | Extra |
+-----------+-------------+------+-----+---------+-------+
| id        | int(11)     | YES  |     | NULL    |       |
| user_name | varchar(50) | YES  |     | NULL    |       |
| age       | int(11)     | YES  |     | NULL    |       |
| address   | varchar(50) | YES  |     | NULL    |       |
+-----------+-------------+------+-----+---------+-------+
4 rows in set (0.14 sec)

mysql> select * from user_info;
+------+-----------+------+--------------------+
| id   | user_name | age  | address            |
+------+-----------+------+--------------------+
|    1 | zhangsan  |   20 | shenzhen nanshang  |
|    2 | lisi      |   20 | shenzhen futian    |
|    3 | wangwu    |   23 | shenzhen luohu     |
|    4 | cailiu    |   24 | shenzhen guangming |
|    5 | zhuqi     |   25 | shenzhen baoan     |
|    6 | houba     |   26 | shenzhen xili      |
|    7 | laojiu    |   27 | shenzhen yantian   |
+------+-----------+------+--------------------+
7 rows in set (0.00 sec)

mysql> 

下面 将 user_info表中的前100条数据导 导出来  只要id  user_name和 age 这3个字段,数据存在hdfs 目录 /tmp/sqoop/user_info下。

 

用sqoop将mysql的数据导入到hive表

标签:res   int   lis   address   char   class   nbsp   hdfs   --   

原文地址:https://www.cnblogs.com/duanxz/p/9201602.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!