任何Spark程序员都是从SparkContext开始的，SparkContext的初始化需要一个SparkConf对象，SparkConf对象中包含了Spark集群配置的各种参数。 SparkConf conf = new SparkConf().setMaster("local").setApp ...
分类：
其他好文 时间：
2020-01-08 22:34:05
阅读次数：
79
一、Redis集群配置 为每一个集群的节点准备一个配置文件： # 7000.conf port 7000 bind 192.168.1.181 daemonize yes pidfile 7000.pid cluster-enabled yes cluster-config-file 7000_no ...
分类：
数据库 时间：
2020-01-06 00:37:55
阅读次数：
106
kubeadm是Kubernetes官方提供的用于快速安装Kubernetes集群的工具，伴随Kubernetes每个版本的发布都会同步更新，kubeadm会对集群配置方面的一些实践做调整，通过实验kubeadm可以学习到Kubernetes官方在集群配置上一些新的最佳实践。 在Kubernetes ...
分类：
Web程序 时间：
2020-01-02 20:39:33
阅读次数：
91
注意这是做缓存服务器用的，而不是持久化，持久化需要开启AOF与RDB 这里是cluster集群配置，多主多从的集群 两台服务器，3主3从 如表 服务器1 服务器2 192.168.17.135:6379 192.168.17.137:6380 192.168.17.135:6381 192.168. ...
分类：
其他好文 时间：
2019-12-28 18:56:38
阅读次数：
94
Redis在3.0版本以后开始支持集群，经过中间几个版本的不断更新优化，最新的版本集群功能已经非常完善。本文简单介绍一下Redis集群搭建的过程和配置方法，redis版本是5.0.4，操作系统是中标麒麟（和Centos内核基本一致）。 1、Redis集群原理 Redis 集群是一个提供在多个Redi ...
分类：
其他好文 时间：
2019-12-26 13:14:26
阅读次数：
90
环境描述：redhat7.3 CDH5.15.1 采用parcels方式部署 报错描述：airflow调度程序，最近2周偶尔报错，报错类型有2类：1、无法初始化集群配置；2、读取配置权限问题 报错一： Launching Job 1 out of 1 Number of reduce tasks i ...
分类：
其他好文 时间：
2019-12-24 19:03:56
阅读次数：
337
一、 集群配置 实际生产中，需要配置集群，来配合使用。 需要安装插件 SSH Slaves 在主节点中进行配置 。 在Configure Global Security中开启TCP port for JNLP agents 随机选取或指定端口 在agent 中进行设置，可以指定端口，也可以随机端口。 ...
分类：
其他好文 时间：
2019-12-21 13:39:51
阅读次数：
112
一、准备三台linux服务器 192.168.64.123192.168.64.124192.168.64.125 二、zookeeper下载 安装 1、下载 http://apache.fayea.com/zookeeper/zookeeper-3.5.5/( apache-zookeeper-3 ...
分类：
其他好文 时间：
2019-12-19 19:16:14
阅读次数：
303
目标：搭建hadoop+hbase+zoopkeer+hive开发环境安装环境:1、centeros192.168.1.1012、centeros192.168.1.102开发环境：window+eclipse一、安装hadoop集群1、配置hosts#vi/etc/hosts192.168.1.101master192.168.1.101slave12、关闭防火墙：systemctlstatus
分类：
其他好文 时间：
2019-12-18 10:52:49
阅读次数：
80
1、Eureka集群搭建 2、Eureka自我保护机制 Eureka集群搭建 高可用集群配置 当注册中心扛不住高并发的时候，这时候 要用集群来扛； 普通操作 我们再新建两个module microservice-eureka-server-2002 microservice-eureka-serve ...
分类：
其他好文 时间：
2019-12-06 23:48:49
阅读次数：
159
