在企业开发中，Hadoop框架自带的InputFormat类型不能满足所有应用场景，需要自定义InputFormat来解决实际问题。 自定义InputFormat步骤如下： （1）自定义一个类继承FilelnputFormat。 （2）自定义一个类继承RecordReader，实现一次读取一个完整文 ...
分类：
其他好文 时间：
2020-07-19 16:25:43
阅读次数：
67
1、系统版本信息[root@linux/]#cat/etc/redhat-releaseCentOSLinuxrelease7.4.1708(Core)[root@linux/]#uname-r3.10.0-693.el7.x86_642、源码编译安装apache服务后，设置开机自启动报错信息################systemctl设置开机自启动报错################[ro
分类：
Web程序 时间：
2020-07-19 11:27:10
阅读次数：
143
**vip配置可以采用两种方式：**1、通过keepalived的方式管理虚拟ip的浮动；2、通过脚本方式启动虚拟ip的方式（即不需要keepalived或者heartbeat类似的软件）1、keepalived方式管理虚拟ip#在编译安装Keepalived之前，必须先安装内核开发包kernel-devel以及openssl-devel、popt-devel等支持库[root@master~]#
分类：
数据库 时间：
2020-07-19 11:25:11
阅读次数：
70
一、操作步骤 1、下载 redis redis 仓库：http://download.redis.io/releases/ 命令：wget http://download.redis.io/releases/redis-(版本号).tar.gz 2、解压 命令：tar -zxvf redis-(版本 ...
分类：
系统相关 时间：
2020-07-18 22:57:49
阅读次数：
121
在官网下载源码包 https://mirrors.edge.kernel.org/pub/software/scm/git/ 编译安装，此处演示2.27.0版本。 tar xf git-2.27.0.tar.gz cd git-2.27.0 yum install gcc zlib-devel.x8 ...
分类：
其他好文 时间：
2020-07-18 22:34:06
阅读次数：
133
在配置hadoop集群时，时间同步是必须要做的，否则会出现各种意想不到的问题。 hadoop102 为 ntp server，hadoop103以及hadoop104 为ntp client（即需要同步时间机器） 1.全部机器都要安装ntp以及ntpdate sudo apt-get install ...
分类：
系统相关 时间：
2020-07-18 16:09:18
阅读次数：
143
1.完成环境准备 a.开启hadoop服务 b.开启Mysql服务进入HIVE命令行界面 c.开启zookeeper服务 d.开启hbase服务进入命令行界面 ...
分类：
其他好文 时间：
2020-07-17 11:26:18
阅读次数：
54
