在使用注册中心Zookeeper时注意关闭linux防火墙,windows防火墙。 1.关闭linux防火墙 (1)停止防火墙服务:systemctl stop firewalld.service (2)禁止firewall开机启动:systemctl disable firewalld.servi ...
分类:
其他好文 时间:
2020-06-23 21:02:27
阅读次数:
52
深度剖析了各个基础技术的源码(ZooKeeper、Hive、Spark、Flink、Hadoop等),对这些基础技术知识动态的排列组合,形成大数据全局架构观,并深入讲述大数据全局架构设计的方方面面,打造真正满足企业万亿级海量数据规模的数据中台,真正赋能前台业务。同时,在企业万亿级真实项目落地环节,采用高性能、高可用、高扩展的架构设计原则,技术上更是融合了企业级主流的离线架构和实时架构,带领大家构建
分类:
其他好文 时间:
2020-06-23 18:39:30
阅读次数:
58
https://www.jianshu.com/p/8848f6a802b1 SuSE上运行MyCat(二):配置单点MyCat 目标 通过本文操作,搭建静态结构如下图的一个MyCat集群。为了节省资源,3个物理库都将存放在同一个MySQL实例当中。 部署MySQL节点 创建分片节点(库) CREA ...
分类:
其他好文 时间:
2020-06-22 15:18:29
阅读次数:
50
ZooKeeper是什么? ZooKeeper是一个开源的分布式应用程序协调系统。简称ZK,ZK是一个典型的分布式数据一致性解决方案,分布式应用程序可以基于它实现数据的发布/订阅、负载均衡、名称服务、分布式协调/通知、集群管理、Master选举、分布式锁盒分布式队列等等功能。它运行在JAVA环境之中 ...
分类:
其他好文 时间:
2020-06-22 14:45:56
阅读次数:
46
一、mycat读写分离Mycat的读写分离是建立在Mysq的主从复制的基础上的#修改配置文件schema.xml<?xmlversion="1.0"?><!DOCTYPEmycat:schemaSYSTEM"schema.dtd"><mycat:schemaxmlns:mycat="http://io.mycat/"><schemaname="TESTDB
分类:
其他好文 时间:
2020-06-22 09:24:43
阅读次数:
47
1)启动zookeeper 演示用的话,直接启动kafka自带的zookeeper即可: cd kafkaDirectory/kafka_2.12-2.5.0 bin/zookeeper-server-start.sh config/zookeeper.properties 生产上建议连接到zook ...
分类:
其他好文 时间:
2020-06-21 15:31:46
阅读次数:
127
Zookeeper 提供一个多层级的节点命名空间(节点称为 znode)。与文件系统不 同的是,这些节点都可以设置关联的数据,而文件系统中只有文件节点可以存放 数据而目录节点不行。 Zookeeper 为了保证高吞吐和低延迟,在内存中维护了这个树状的目录结构,这 种特性使得 Zookeeper 不能 ...
分类:
其他好文 时间:
2020-06-20 21:11:39
阅读次数:
67
Zookeeper 是一个典型的发布/订阅模式的分布式数据管理与协调框架,开发人员 可以使用它来进行分布式数据的发布和订阅。 通过对 Zookeeper 中丰富的数据节点进行交叉使用,配合 Watcher 事件通知机 制,可以非常方便的构建一系列分布式应用中年都会涉及的核心功能,如: 1、数据发布/ ...
分类:
其他好文 时间:
2020-06-20 18:56:45
阅读次数:
70
Zookeeper概述 一. 简介 Zookeeper是一款Yahoo(雅虎)开发的分布式协调框架,后来贡献给了Apache。 Zookeeper提供了中心化服务(注册中心):统一配置信息、统一命名、提供分布式锁、提供组服务。 有三种运行模式 单机模式:只在一台服务器上安装,只能启动这个框架一部分的 ...
分类:
其他好文 时间:
2020-06-20 18:30:17
阅读次数:
65
一、概述 1.ZAB(Zookeeper Atomic Broadcast) 是专门为Zookeeper设计的一套广播协议 2.这个协议底层基于2PC算法进行设计,利用PAXOS算法进行改进 3.作用:原子广播和崩溃恢复 二、原子广播 1.原子广播主要保证Zookeeper集群中的所有节点的数据一致 ...
分类:
其他好文 时间:
2020-06-20 14:07:33
阅读次数:
53