1.Hive安装部署 1．Hive安装及配置 （1）把apache-hive-1.2.1-bin.tar.gz上传到linux的/opt/software目录下 （2）解压apache-hive-1.2.1-bin.tar.gz到/opt/module/目录下面 [root@hadoop102 so ...
分类：
其他好文 时间：
2020-06-16 12:47:14
阅读次数：
56
互联网时代中想要企业更好的发展，利用好从互联网所获取到的大量数据是至关重要的一点，互联网时代又被称为大数据时代。大数据是指无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合。大数据技术，是指从各种各样类型的数据中，快速获得有价值信息的能力。 适用于大数据的技术，包括大规模并行处理（MPP）数据库，数据挖掘电网，分布式文件系统，分布式数据库，云计算平台，互联网，和可扩展的存储
分类：
其他好文 时间：
2020-06-16 11:32:17
阅读次数：
411
1.基于Receiver的方式 这种方式使用Receiver来接收kafka中的数据，Receiver是基于kafka的高层Consumer API来实现的。Receiver从Kafka中获取的数据都是存储在Spark Executor的内存中的，然后Spark Streaming启动的job会去处 ...
分类：
其他好文 时间：
2020-06-15 22:58:10
阅读次数：
60
kubernetes集群环境搭建(4) 一、kubernetes集群环境搭建 1.1.1 安装部署主控节点服务apiserver 1.部署kube-apiserver集群 主机名 | 角色 | ip | | hdss-21 | kube-apiserver|10.0.0.21 hdss-22 | k ...
分类：
Web程序 时间：
2020-06-14 23:27:55
阅读次数：
72
SUSE Linux Enterprise Desktop 15 的安装部署方式和要求已经发生了变化，为了突出对云计算和虚拟化的支持，对安装介质做了大量瘦身 ...
分类：
系统相关 时间：
2020-06-14 09:13:54
阅读次数：
111
当我们对Oracle进行安装部署时，需要按照相关要求修改OS内核参数，下面对Oracle按照部署时需要修改的相关内核参数进行简单介绍。 注:OS的内核参数大多数存放在/proc/sys目录下，可以在系统运行时进行更改，但是当系统重新启动时会失效，而通过/etc/sysctl.conf文件可以永久生效 ...
分类：
数据库 时间：
2020-06-13 23:14:29
阅读次数：
97
安装部署rundeck1、安装rundeck仓库源rpm-Uvhhttp://repo.rundeck.org/latest.rpm2、安装rundeckjavayuminstallrundeckjava3、启动rundeck及加入系统启动项systemctlstartrundeckdsystemctlenablerundeckd4、访问rundeck注意:在访问前需要修改配置文件/etc/run
分类：
其他好文 时间：
2020-06-11 18:18:42
阅读次数：
64
GlusterFS简介GlusterFS(GNUClusterFileSystem)是一种全对称的开源分布式文件系统，所谓全对称是指GlusterFS采用弹性哈希算法，没有中心节点，所有节点全部平等。GlusterFS配置方便，稳定性好，可轻松达到PB级容量，数千个节点。GlusterFS重要概念birck：GlusterFS的基本元素，以节点服务器目录形式展现；volume：多个brick的逻辑
分类：
其他好文 时间：
2020-06-11 09:16:39
阅读次数：
76
实验环境 虚拟机数量：3 系统版本：Centos 7.5 Hadoop版本：Apache Hadoop 2.7.3 Zookeeper版本：Apache zookeeper-3.4.10. HBase版本：Apache HBase 1.2.6 1.启动Hadoop集群 在master启动Hadoop ...
分类：
其他好文 时间：
2020-06-10 11:05:53
阅读次数：
63
1. 什么是FastDFS FastDFS 是用 c 语言编写的一款开源的分布式文件系统。FastDFS 为互联网量身定制， 充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用 FastDFS 很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。 FastDFS ...
分类：
其他好文 时间：
2020-06-07 21:50:09
阅读次数：
81
