一、nifi基本配置 1. 修改各节点主机名,修改/etc/hosts文件内容。 具体请参考《Kafka:ZK+Kafka+Spark Streaming集群环境搭建(一)VMW安装四台CentOS,并实现本机与它们能交互,虚拟机内部实现可以上网。》 2. 安装zookeeper分布式集群具体请参考 ...
分类:
其他好文 时间:
2018-08-06 19:17:08
阅读次数:
216
1、面试题 zk都有哪些使用场景? 2、面试官心里分析 zk,zookeeper,你们现在在聊的面试topic,是分布式系统,他其实已经跟你聊完了dubbo以及相关的一些问题,确认,你现在分布式服务框架,rpc框架,基本都有一些认知。可能开始要跟你聊分布式相关的其他问题了。 分布式锁这个东西,很常用 ...
分类:
其他好文 时间:
2018-08-03 14:39:35
阅读次数:
137
1、面试题 一般实现分布式锁都有哪些方式?使用redis如何设计分布式锁?使用zk来设计分布式锁可以吗?这两种分布式锁的实现方式哪种效率比较高? 2、面试官心里分析 其实一般问问题,都是这么问的,先问问你zk,然后其实是要过度的zk关联的一些问题里去,比如分布式锁。因为在分布式系统开发中,分布式锁的 ...
分类:
其他好文 时间:
2018-08-03 14:34:13
阅读次数:
151
前提环境:jdk、hadoop、ssh 一、hbase安装 下载 配置环境变量 查看版本,安装成功 二、伪分布式的配置 进入hbase目录下 1、配置/conf/hbase-env.sh 配置JAVA_HOME,HBASE_CLASSPATH,HBASE_MANAGES_ZK.HBASE_CLASS ...
分类:
其他好文 时间:
2018-07-21 20:33:27
阅读次数:
173
redis按照正则批量删除key redis客户端--jedis 在Spark结构化流readStream、writeStream 输入输出,及过程ETL Spark Structured Streaming入门编程指南 Structured Streaming 实现思路与实现概述 Spark结构式 ...
分类:
其他好文 时间:
2018-07-21 00:46:53
阅读次数:
171
Zookeeper概念简介: Zookeeper是一个分布式协调服务;就是为用户的分布式应用程序提供协调服务 1、zookeeper是为别的分布式程序服务的(比如服务管理、心跳检查、配置信息管理) 2、Zookeeper本身就是一个分布式程序(只要有半数以上节点存活,zk就能正常服务) 3、Zook ...
分类:
其他好文 时间:
2018-07-18 20:36:43
阅读次数:
163
安装sol r 三个节点192.168.1.231,192.168.1.234,192.168.1.235 下载安装包solr.tar.gz 解压 tar -zxvf solr.tar.gz 配置ZK 编辑solr.in.sh 修改ZK_HOST 修改SOLR_HOST(所在节点主机IP) 启动 浏 ...
分类:
其他好文 时间:
2018-07-17 23:33:22
阅读次数:
260
Java连接Zookeeper 一、配置zk环境 本人使用的是虚拟机,创建了两台linux服务器(安装过程百度上很多) 准备zk的安装包,zookeeper 3.4.10.tar.gz,可在Apache官网下载,这里我提供了一个百度云的https://pan.baidu.com/s/15icVROS ...
分类:
编程语言 时间:
2018-07-17 16:31:55
阅读次数:
225
自我保护背景 首先对Eureka注册中心需要了解的是Eureka各个节点都是平等的,没有ZK中角色的概念, 即使N-1个节点挂掉也不会影响其他节点的正常运行。 默认情况下,如果Eureka Server在一定时间内(默认90秒)没有接收到某个微服务实例的心跳,Eureka Server将会移除该实例 ...
分类:
编程语言 时间:
2018-07-16 00:29:57
阅读次数:
181
redis按照正则批量删除key redis客户端--jedis 在Spark结构化流readStream、writeStream 输入输出,及过程ETL Spark Structured Streaming入门编程指南 Structured Streaming 实现思路与实现概述 Spark结构式 ...
分类:
其他好文 时间:
2018-07-16 00:29:26
阅读次数:
159