Heartbeat 项目是 Linux-HA 工程的一个组成部分,它实现了一个高可用集群系统。心跳服务和集群通信是高可用集群的两个关键组件,在 Heartbeat 项目里,由 heartbeat 模块实现了这两个功能。本实验实现web服务器的主备双热备份系统Linux系统:Linux6.8规划:2台... ...
分类:
Web程序 时间:
2020-05-25 19:12:44
阅读次数:
87
本文摘自于阿里云高级技术专家王夕宁撰写的《Istio 服务网格技术解析与实战》一书,讲述了如何使用 Istio 进行多集群部署管理来阐述服务网格对多云环境、多集群即混合部署的支持能力。
分类:
其他好文 时间:
2020-05-25 15:34:45
阅读次数:
54
1.基础概念1.1集群与节点kubernetes是一个开源的容器引擎管理平台,实现容器化应用的自动化部署,任务调度,弹性伸缩,负载均衡等功能,cluster是由master和node两种角色组成master负责管理集群,master包含kube-apiserver,kube-controller-manager,kube-scheduler,etcd组件node节点运行容器应用,由Containe
分类:
Web程序 时间:
2020-05-25 09:44:49
阅读次数:
80
简介 Spark有3种集群管理器: Standalone Hadoop YARN 又分为yarn client与yarn cluser Apache Mesos 生产环境中一般使用yarn cluser模式 个人理解 yarn主要有两个作用. 一个是创建container以此来分配计算资源 另外一个 ...
分类:
其他好文 时间:
2020-05-24 11:33:26
阅读次数:
64
hadoop完全分布式集群有一般集群和HA高可用集群 一般集群只有一个namenode节点,当namenode节点出现故障时,整个集群将无法使用。因此,相对的出现了HA集群 HA集群具有主备切换机制,有两个namenode节点,active/standby namenode,两个节点元数据同步, 当 ...
分类:
其他好文 时间:
2020-05-23 20:27:21
阅读次数:
63
架构 Driver Program:每个 Spark 应用的主程序 Spark Context:在 Driver 里面构建,用于协调、调度在各个节点运行的进程 Cluster Manager:管理节点,分配资源(可以是 Spark standalone、Mesos、Yarn、K8S) Worker ...
分类:
其他好文 时间:
2020-05-22 09:37:29
阅读次数:
62
1 脚本启动方式 1. 创建/data目录,关闭防火墙,selinux;上传etcd软件包 2. 解压软件包 3. 配置 启动文件 1)node1节点 2)node2节点 3)node3节点 4. 给etcd.sh赋予执行权限并启动 5. 查看cluster成员 6. 查看cluster健康状态 2 ...
分类:
其他好文 时间:
2020-05-21 21:14:46
阅读次数:
56
前期准备:hadoop HA环境已搭建成功,zookeeper能正常运行。 安装流程: 1.解压tar zxvf hbase 1.2.6 bin.tar.gz (当前1.2. 版本最为稳定,1.3. 还在优化中) vi /etc/profile?环境变量 export?HBASE_HOME=/had ...
分类:
其他好文 时间:
2020-05-21 19:00:42
阅读次数:
50
当时K8S环境想用来设计部署微服务这块的架构才发现的这个问题 我的K8S集群是使用kubeadm安装的,当时也是跟着网上教程走的,并没有注意网络路由使用的iptables规则 现在出现pod不能ping通service或者ping通CLUSTER-IP的问题,导致如果我再集群里部署注册中心,并不能正 ...
分类:
其他好文 时间:
2020-05-21 17:45:11
阅读次数:
274
高可用性的HDFS:Hadoop分布式文件系统深度实践专注于Hadoop分布式文件系统(HDFS)的主流HA解决方案,内容包括:HDFS元数据解析、Hadoop元数据备份方案、Hadoop Backup Node方案、AvatarNode解决方案以及最新的HA解决方案Cloudrea HA Name ...
分类:
其他好文 时间:
2020-05-21 16:29:51
阅读次数:
73