./sqoop export --connect jdbc:mysql://192.168.58.180/db --username root --password 123456 --export-dir '/path' --table t_detail -m 用单引号 不保留原有的变量意思 否则如 ...
分类：
其他好文 时间：
2017-03-17 17:39:27
阅读次数：
145
Sqoop介绍 http://sqoop.apache.org http://sqoop.apache.org/docs/1.4.6/SqoopUserGuide.html 1.什么是Sqoop? 将关系数据库(oracle,mysql,postgresql)数据与hadoop数据进行转换的工具 2 ...
分类：
其他好文 时间：
2017-03-12 16:34:10
阅读次数：
178
Sqoop导入导出的几个例子 http://sqoop.apache.org/docs/1.4.6/SqoopUserGuide.html#_importing_data_into_hive node2 Sqoop参数介绍_其他命令_导入导出 导入 例一：从DBMS到HDFS 1.node4下启动m ...
分类：
其他好文 时间：
2017-03-12 16:14:52
阅读次数：
422
在使用Sqoop将Hive中的数据导出到MySQL的过程中遇到这样的一个异常，是导出到的数据库的max_allowed_packet设置的过小所致。 通过在数据库中执行命令： mysql> show variables like 'max_%packet'; + + + | Variable_nam ...
分类：
数据库 时间：
2017-03-11 21:44:05
阅读次数：
197
目录： 1.修改主机名和用户名 2.配置静态IP地址 3.配置SSH无密码连接 4.安装JDK1.7 5.配置Hadoop 6.安装Mysql 7.安装Hive 8.安装Hbase 9.安装Sqoop ******************** 1.修改主机名和用户名 修改主机名：Centos中通过v ...
分类：
其他好文 时间：
2017-02-26 19:33:33
阅读次数：
241
参考：http://blog.csdn.net/ziju125521/article/details/52575715 使用wget下载一个 rpm包, 然后用 rpm -ivh xxx.rpm 安装这个软件，嫌麻烦的话，就 可以直接用 yum install sqoop 来自动下载和安装依赖的rp ...
分类：
系统相关 时间：
2017-02-10 15:38:04
阅读次数：
194
数据表 第一类：数据库中的数据导入到HDFS上 第二类：将HDFS上的数据导出到数据库中(不要忘记指定分隔符) ...
分类：
数据库 时间：
2017-02-05 10:46:42
阅读次数：
217
P573 从mysql导入数据到hdfs 第一步：在mysql中创建待导入的数据 1、创建数据库并允许所有用户访问该数据库 mysql -h 192.168.200.250 -u root -p 2、创建表widgets 3、导入测试数据 第二步：执行sqoop导入命令 缺少mysql连接器 先导入 ...
分类：
其他好文 时间：
2017-01-24 14:42:10
阅读次数：
644
工作了两年多了，一直没写过总结。我想，是该写写总结了，看看最近的收获和教训。 我从事大数据开发，是始于2015年，接触的技术也比较有限，从MapReduce开始学起，到HDFS和Hadoop she'll命令，到Spark、Hive、Hbase，Sqoop，也算基本入门了，期间还部署了Hadoop集 ...
分类：
其他好文 时间：
2017-01-15 17:02:19
阅读次数：
175
