码迷,mamicode.com
首页 > 其他好文 > 详细

sqoop 1.99.7 安装及配置

时间:2016-11-19 18:08:31      阅读:470      评论:0      收藏:0      [点我收藏+]

标签:默认   dir   解压   文件复制   技术   访问   use   etc   变量   

一  下载sqoop 1.99.7

  http://mirror.bit.edu.cn/apache/sqoop/1.99.7/

二 解压安装文件

  技术分享

三 配置Sqoop 环境变量

  技术分享

  技术分享

  技术分享

最后把mysql的驱动jar文件复制到extera这个目录下。

四 配置Hadoop代理访问

因为sqoop访问Hadoop的MapReduce使用的是代理的方式,必须在Hadoop中配置所接受的proxy用户和组。找到Hadoop的core-site.xml配置文件(本例是$HADOOP_HOME/etc/hadoop/core-site.xml):

 

<property>
  <name>hadoop.proxyuser.$SERVER_USER.hosts</name>
  <value>*</value>
</property>
<property>
  <name>hadoop.proxyuser.$SERVER_USER.groups</name>
  <value>*</value>
</property>

五 Sqoop服务器配置
sqoop.properties文件配置比较多,这里按需要配置,我写下我配置的项,其他都使用默认值:

org.apache.sqoop.submission.engine.mapreduce.configuration.directory=/home/hadoop/hadoop2.6/etc/hadoop  

org.apache.sqoop.security.authentication.type=SIMPLE  

  org.apache.sqoop.security.authentication.handler=org.apache.sqoop.security.authentication.SimpleAuthenticationHandler  

  org.apache.sqoop.security.authentication.anonymous=true 

(6)验证配置是否有效

使用bin中的sqoop2-tool工具进行验证:

技术分享

 七 开启服务器

  技术分享

 

 

sqoop 1.99.7 安装及配置

标签:默认   dir   解压   文件复制   技术   访问   use   etc   变量   

原文地址:http://www.cnblogs.com/duking1991/p/6081118.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!