本文转自:https://www.cnblogs.com/chhyan-dream/p/12013463.html 1、概述 为了更好地理解调度，我们先看一下集群模式的Spark程序运行架构图，如上所示： 2、Spark中的基本概念 1、Application：表示你的程序 2、Driver：表示m ...
分类：
其他好文 时间：
2021-06-02 15:22:12
阅读次数：
0
--link 思考一个场景，我们编写了一个微服务器， database url=ip; 项目不重启，数据库ip换掉了，我们希望可以处理这个问题，可以名字来进行访问容器？ [root@kuangshen /]# docker exec -it tomcat02 ping tomcat01 ping: ...
分类：
编程语言 时间：
2021-06-02 14:52:05
阅读次数：
0
1. kubeconfig配置文件 kubectl使用kubeconfig认证文件连接K8s集群，使用kubectl config指令生成kubeconfig文件。 2. kubectl管理命令概要 官方文档参考地址：https://kubernetes.io/zh/docs/reference/k ...
分类：
其他好文 时间：
2021-06-02 14:42:54
阅读次数：
0
1. namespace命名空间 命名空间（Namespace）：kubernetes蒋资源对象逻辑上隔离，从而形成多个虚拟集群 应用场景： 根据不同团队划分命名空间 根据项目划分命名空间 kubectl_get namespace default：默认命名空间 kube-system：k8s系统方 ...
分类：
其他好文 时间：
2021-06-02 14:39:41
阅读次数：
0
Flink可靠性的基石-checkpoint机制详细解析 Checkpoint介绍 checkpoint机制是Flink可靠性的基石，可以保证Flink集群在某个算子因为某些原因(如 异常退出)出现故障时，能够将整个应用流图的状态恢复到故障之前的某一状态，保 证应用流图状态的一致性。Flink的ch ...
分类：
其他好文 时间：
2021-06-02 14:37:17
阅读次数：
0
一、概述 zookeeper 类似文件系统，client 可以创建节点、更新节点、删除节点，那么如何做到节点的权限的控制呢？zookeeper的access control list 访问控制列表可以做到这一点。 # 语法 # 采用特定的授权策略给特定的对象授予特定的权限 setAcl path a ...
分类：
其他好文 时间：
2021-06-02 14:07:32
阅读次数：
0
ZooKeeper 是一个高可用的分布式数据管理与系统协调框架。基于对 Paxos 算法的实现，使该框架保证了分布式环境中数据的强一致性，也正是基于这样的特性，使得 ZooKeeper 解决很多分布式问题。 下面对 ZK 的应用场景迚行一个分门归类的介绉。 一、数据发布与订阅（配置中心） 发布与订阅 ...
分类：
其他好文 时间：
2021-06-02 13:47:13
阅读次数：
0
我们可以设置集群的平衡参数来暂时禁用掉平衡，具体步骤如下： 1.如果可能的话，先暂停掉数据新增和更新操作，这样会提高集群恢复的时间； 2.禁用集群分片平衡操作，直到告诉集群可以恢复平衡操作为止，禁用配置方式： PUT /_cluster/settings { "transient" : { "clu ...
分类：
其他好文 时间：
2021-06-02 12:58:20
阅读次数：
0
I am in a bit of a bind (pun intended). I have a ubuntu server running kafka & zookeeper. This server has both ipv4 and ipv6 protocols installed. In t ...
分类：
其他好文 时间：
2021-06-02 12:29:05
阅读次数：
0
目标 安全 稳定 廉价 快速 容灾 扩展 服务器 基础数据 腾讯云 2核 8GB 5Mbps 安全组配置 开放80、443，允许全部ip访问 开放22、6443，开放当前ip访问 环境 # 卸载firewalld，由安全组统一管理端口 sudo dnf remove firewalld # 关闭交换 ...
分类：
其他好文 时间：
2021-06-02 12:19:37
阅读次数：
0
