Sqoop(发音：skup)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递，可以将一个关系型数据库（例如 ： MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据 ...
分类：
数据库 时间：
2021-06-19 19:26:27
阅读次数：
0
上一篇文章我们简单的介绍《 linux中sqoop实现hive数据导入到mysql》，本文将简单介绍如何通过sqoop把hive数据导入到mysql。一. 前期准备 实践本文内容，默认您已经安装和部署了hadoop,mysql,hive,sqoop等环境。如相关安装和部署有问题，可以参考《 linu ...
分类：
数据库 时间：
2021-06-19 19:26:08
阅读次数：
0
运行环境 centos 5.6 hadoop hivesqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具 在使用过程中可能遇到的问题：sqoop依赖zookeeper，所以必须配置ZOOKEEPER_HOME到环境变量中。sqo ...
分类：
数据库 时间：
2021-06-19 19:24:57
阅读次数：
0
ftp 防火墙放开 20/21端口，还提示报错。 经查询是传输数据会用个新的随机端口。而这个随机端口是有范围的，网上说法不一，而且试了几个端口范围都不太行。 解决办法是看ftp服务端的配置文件中找。 比如我的服务器用的是 pure-ftpd，找到配置文件路径 ./pure-ftpd/etc/pure ...
分类：
其他好文 时间：
2021-06-19 19:02:43
阅读次数：
0
一、如何执行 ./adapter.sh 20211121 'importdata.sh|!DATE' adapter.sh：适配器脚本 20201121：适配器脚本参数1，执行日期 'importdata.sh|!DATE'：适配器脚本参数2，具体需要执行的脚本和参数，以|分隔，多个参数也以|分隔 ...
分类：
系统相关 时间：
2021-06-19 18:59:41
阅读次数：
0
1、切换到下载目录，下载postgresql（此处我的文件下载到了download文件夹） cd /download wget {下载路径}(时间太久下载地址已经找不到了，可去官网查看，此处以此版本为例：postgresql-12.2.tar.bz2) 2、解压 tar -xjvf /downloa ...
分类：
数据库 时间：
2021-06-19 18:52:34
阅读次数：
0
# Linux 基础指令 vi打开文件 ls列出目录内容 cd -返回之前目录（不一定是上一级目录）cd 。。才是返回上一级 mkdir创建文件夹 mkdir -p递归创建文件夹 cp复制空文件 cp-r连内部文件一起复制 -p（保留文件属性如时间。。。） mv剪切没有这样的限制 vi /etc/s ...
分类：
系统相关 时间：
2021-06-19 18:44:14
阅读次数：
0
我的宿机是Mint20,所有使用linux的命令启用VT-x/AMD-V linux启用方式 在宿机上执行命令列出所有虚机 ~$ VBoxManage list vms "centos7-1" {ec49b90a-fd46-402d-bce6-d73f0b889c9b} "centos7-2" {f ...
分类：
其他好文 时间：
2021-06-18 19:55:56
阅读次数：
0
在centos上最常用的定时任务服务是crond。 任务是由 cron (crond) 这个系统服务来控制的，这个系统服务是默认启动的。用户自己设置的计划任务则使用crontab命令。crond和crontab是不可分割的。 1. 安装软件服务 正常centos7自动安装crond服务及cronta ...
分类：
其他好文 时间：
2021-06-18 19:55:38
阅读次数：
0
一、Linux目录结构 1、树形目录结构 2、根目录 ■ 所有分区、目录、文件等的位置起点 ■ 整个树形目录结构中，使用独立的一个“/”表示 3、常见的子目录 /root 管理员的宿主（家）目录 /home/xxx 除root用户之外的普通用户的家目录 /bin 存放二进制文件，所有用户可执行的命令 ...
分类：
系统相关 时间：
2021-06-18 19:43:40
阅读次数：
0
