码迷,mamicode.com
首页 > 其他好文 > 详细

sqoop 使用指定条件导入数据

时间:2014-06-08 04:57:18      阅读:350      评论:0      收藏:0      [点我收藏+]

标签:hdfs   bigdata   

在测试sqoop语句的时候,一定要限制记录数量,否则就像我刚才,等了1个多小时,才看到测试结果。

????sqoop-import --options-file media_options.txt --table my_table --where "ID = 2" --target-dir /user/jenkins/bigdata/import/20140607 -m 1 --fields-terminated-by ‘\001‘ --lines-terminated-by ‘\n‘

导入后,可以用hdfs dfs -get命令获取文件到本地目录

然后用bunzip2 命令解压,

最后用emacs的hexl-mode查看文件的16进制格式,检查分割符是否正确。

sqoop 使用指定条件导入数据,布布扣,bubuko.com

sqoop 使用指定条件导入数据

标签:hdfs   bigdata   

原文地址:http://blog.csdn.net/csfreebird/article/details/29210481

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!