Kafka集群搭建 Zookeeper简介 ZooKeeper 是一个开源的分布式框架，提供了协调分布式应用的基本服务。它向外部应用 暴露一组通用服务——分布式同步（Distributed Synchronization）、命名服务（Naming Service）、集群维护（Group Mainte ...
分类：
其他好文 时间：
2021-04-12 11:49:15
阅读次数：
0
Docker部署kafka集群 利用docker可以很方便的在一台机子上搭建kafka集群并进行测试。为了简化配置流程，采用docker-compose进行进行搭建。 kafka搭建过程如下： 编写docker-compose.yml文件,内容如下: version: '3.3' services: ...
分类：
其他好文 时间：
2021-04-10 12:51:06
阅读次数：
0
一、大数据框架三种语义???? 在分布式系统中，如kafka、spark、flink等构成系统的任何节点都是被定义为可以彼此独立失败的。比如在 Kafka 中，broker 可能会 crash，在 producer 推送数据至 topic 的过程中也可能会遇到网络问题。根据 producer 处理此 ...
分类：
其他好文 时间：
2021-04-09 13:27:18
阅读次数：
0
部署环境：CentOS 7 1、Heartbeat介绍 Heartbeat是Linux-HA项目中的一个组件，它实现了一个高可用集群系统。心跳检测和集群通信是高可用的两个关键组件，在Heartbeat项目中，由heartbeat模块实现了这两个功能。Heartbeat是目前开源HA项目中十分成功的例 ...
分类：
其他好文 时间：
2021-04-09 12:52:08
阅读次数：
0
zkCli.sh ls / 记住zk的根目录下内容 ls或者get /kafka/cluster/id 查看zk下的kafuka controller ls /kafka/brokers/ kafka目录下 config查看配置：server.properties broker.id=0 liste ...
分类：
其他好文 时间：
2021-04-08 13:49:09
阅读次数：
0
一、 环境和版本 1. 操作系统 干干静静的centos7系统，选取的是mini的iso最小化安装 # cat /etc/centos-release CentOS Linux release 7.3.1611 (Core) # cat /proc/version Linux version 3.1 ...
分类：
其他好文 时间：
2021-04-08 13:37:16
阅读次数：
0
FastDFS 1.fastdfs基本概念 FastDFS是分布式文件系统。使用 FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。 2.工作原理 fastdfs架构包括Tracker(跟踪)server 客户端请求 Tracker server 进行文件上传、下载，通过 ...
分类：
其他好文 时间：
2021-04-07 11:43:28
阅读次数：
0
zookeeper概述： zookeeper是一个开源的分布式协调服务，提供分布式数据一致性解决方案，分布式应用程序可以实现数据发布订阅、负载均衡、命名服务、集群管理分布式锁、分布式队列等功能。 zookeeper提供了分布式数据一致性解决方案，那什么是分布式数据一致性？首先我们谈谈什么叫一致性？ ...
分类：
其他好文 时间：
2021-04-07 11:43:05
阅读次数：
0
本文是我司在工信部信息通信研究院“2021算网融合产业发展论坛暨CCSA TC610 WG4技术年会”上的主题演讲，介绍了Laxcus集群操作系统的产品定位、功能组成、生态建设，大数据、人工智能在系统的角色，其中部分内容略有删减。 ...
分类：
其他好文 时间：
2021-04-07 11:12:35
阅读次数：
0
1.RPC服务框架的基本结构 RPC本质上就是“像调用本地方法一样调用远程方法”，主要涉及到客户端和服务端的数据的传输，整体的RPC的框架服务就如下所示： 2.使用HTTP实现服务的组成部分 注册中心：zookeeper 序列化方式：json 网络通信：http协议 代理方式：jdk动态代理 3.项 ...
分类：
Web程序 时间：
2021-04-07 11:10:03
阅读次数：
0
