搭建kafka集群 一.要先搭建zookeeper集群 搭建伪集群来熟悉搭建步骤,也就是采用一台电脑和多台电脑的区别。 1.步骤 下载 zookeeper下载:https://downloads.apache.org/zookeeper/ 这里选用的是 我这里下载的是zookeeper-3.5.7, ...
微服务架构下的统一授权 识别客户端的身份,并且能够保存这个身份的状态 HTTP协议无状态协议: 浏览器的Cookie(disk / mem),客户端的状态存储 服务器端的session(服务端的状态存储) 集群模式下的会话丢失 Session Sticky IPHASH |hash(ip)|%目标服 ...
分类:
其他好文 时间:
2020-12-21 11:07:37
阅读次数:
0
欢迎关注个人公号《运维开发故事》前提条件Cephadm使用容器和systemd安装和管理Ceph集群,并与CLI和仪表板GUI紧密集成。cephadm仅支持octopusv15.2.0和更高版本。cephadm与新的业务流程API完全集成,并完全支持新的CLI和仪表板功能来管理集群部署。cephadm需要容器支持(podman或docker)和Python3。时间同步基础配置这里我使用的cento
分类:
其他好文 时间:
2020-12-21 11:01:16
阅读次数:
0
近日K8s官方称最早将在1.23版本弃用docker作为容器运行时,并在博客中强调可以使用如containerd等CRI运行时来代替docker。本文会做详细解读,并介绍docker与containerd的关系,以及为什么containerd是更好的选择。这里先回答下TKE用户关心的问题:我们的集群该怎么办?TKE集群该怎么办TKE早在2019年5月就已经支持选择containerd作为容器运行时
分类:
其他好文 时间:
2020-12-19 12:50:38
阅读次数:
2
问个问题吧!为什么你需要了解binlog的落盘机制呢? 我来回答一下: ? 上一篇文章提到了生产环境中你可以使用binlog做数据的恢复、审计、以及搭建主从架构的MySQL集群。那你使用这些特性优势的时候有没有问自己一下,你使用的binlog是安全的吗?会不会少记录了一部分数据呢?因为使用一个有问题 ...
分类:
数据库 时间:
2020-12-18 12:36:00
阅读次数:
2
本节课主要介绍如何在 Serverless Kubernetes 集群中低成本运行 Spark 数据计算。首先简单介绍下阿里云 Serverless Kubernetes 和 弹性容器实例 ECI 这两款产品;然后介绍 Spark on Kubernetes;最后进行实际演示。
分类:
其他好文 时间:
2020-12-17 12:22:18
阅读次数:
2
kubeadm 是官方社区推出的一个用于快速部署 kubernetes 集群的工具,这个工具能通过两条指令完成一个 kubernetes 集群的部署: 第一、创建一个 Master 节点 kubeadm init 第二, 将 Node 节点加入到当前集群中 $ kubeadm join <Maste ...
分类:
其他好文 时间:
2020-12-17 12:17:27
阅读次数:
2
1. 配置主机名 [root@hadoop01 ~]# hostname #显示当前主机名 方法一:通过配置文件/etc/hostname (重启后生效) [root@hadoop01 ~]# vim /etc/hostname 方法二:通过命令hostnamectl set-hostname 新主 ...
分类:
其他好文 时间:
2020-12-17 12:11:05
阅读次数:
2
1、基本架构 (1)、应用程序Spark 应用程序由一个驱动器进程和一组执行器进程组成。驱动进程运行 main()函数,位于集群中的一个节点上,它负责三件事:维护 Spark 应用程序的相关信息;回应用户的程序或输入;分析任务并分发给若干执行器进行处理。驱动器是必须的,它是 Spark 应用程序的核 ...
分类:
其他好文 时间:
2020-12-17 12:09:25
阅读次数:
2
0、题记在写繁重的业务场景下,你是否遇到过Elasticsearch集群的性能问题?你是否遇到过Elasticsearch数据索引化速度限制问题?你是否遇到过搜索花费时间太长而无法执行的延迟问题?你是否遭遇过Elasticsearch集群故障排查的挑战?你是否努力尝试在零停机情况下提高Elasticsearch集群的稳定性?你是否想过从监控的角度去看Elasticsearch关键指标?如果你对以上
分类:
其他好文 时间:
2020-12-16 12:19:29
阅读次数:
2