Hadoop之——SQOOP笔记

标签：mapreduce   hadoop   sqoop   

转载请注明出处:http://blog.csdn.net/l1028386804/article/details/46517039

SQOOP是用于对数据进行导入导出的。

1.把数据从mysql导入到hdfs(默认是/user/<username>)中

 sqoop import --connect jdbc:mysql://hadoop0:3306/hive  --username root --password admin --table TBLS --fields-terminated-by '\t'  --null-string '**'  -m 1 --append  --hive-import

 sqoop import --connect jdbc:mysql://hadoop0:3306/hive  --username root --password admin --table TBLS --fields-terminated-by '\t'  --null-string '**'  -m 1 --append  --hive-import  --check-column 'TBL_ID' --incremental append --last-value 6

2.把数据从hdfs导出到mysql中 

  sqoop export --connect jdbc:mysql://hadoop0:3306/hive  --username root --password admin --table ids --fields-terminated-by '\t' --export-dir '/ids'

3.设置为作业，运行作业

  sqoop job --create myjob -- import --connect jdbc:mysql://hadoop0:3306/hive  --username root --password admin --table TBLS --fields-terminated-by '\t'  --null-string '**'  -m 1 --append  --hive-import 

4. 导入导出的事务是以Mapper任务为单位。

Hadoop之——SQOOP笔记

标签：mapreduce   hadoop   sqoop   

原文地址：http://blog.csdn.net/l1028386804/article/details/46517039