1 环境清理以及安装 1.1 mysql旧版本清除 准备5台虚拟机，分配如下 mysql管理结点：xuegod1.cn IP：192.168.10.31 (安装server、client) mysql数据结点：xuegod2.cn IP：192.168.10.32 (安装server、client) ...
分类：
数据库 时间：
2020-10-29 10:31:34
阅读次数：
26
最近，在做服务的自动化部署时遇到一个小需求，测试童鞋希望能够直接在jenkins的控制台上看到服务的启动日志，用户是上帝，你们想要那就给你们做出来好了。 那么，问题来了，怎么才能在jenkins控制台上实时展示服务的启动日志呢？ 经常登录linux服务器查看日志的童鞋会说我平时都是使用tail -f ...
分类：
其他好文 时间：
2020-10-29 09:39:53
阅读次数：
62
在单点或者少数节点故障的情况下，集群还可以正常的提供服务，HDFS高可用机制可以通过配置Active/Standby两个NameNodes节点实现在集群中对NameNode的热备来消除单节点故障问题，如果单个节点出现故障，可通过该方式将NameNode快速切换到另外一个节点上。
分类：
其他好文 时间：
2020-10-29 09:35:04
阅读次数：
15
如果确定主库确实是无法重启了，那么就最快进行切库操作： 1、快速确定主库有哪些直接从库； 2、快速确定这些从库所在机房和同步位点，作用是：确定谁能作为最佳新主库（同机房且同步旧主库最多的数据的实例）； 3、确定好新主库后，就开始变更集群架构，将其余机器change到新主库（change的时候，注意集 ...
分类：
数据库 时间：
2020-10-27 11:40:37
阅读次数：
33
配置集群 配置yarn-env.sh Linux系统中获取JDK的安装路径 [xiaoran@hadoop101 hadoop-2.7.2]$ echo $JAVA_HOME /opt/module/jdk1.8.0_144 修改JAVA_HOME路径 [xiaoran@hadoop101 hado ...
分类：
其他好文 时间：
2020-10-27 11:36:17
阅读次数：
28
Hadoop基础之环境搭建 环境搭建 本地环境 可以用于开发的单节点模式，没有分布式的概念 伪分布式环境 一个节点表示一整个集群，但是分布式的概念，一个节点充当分布式里的所有角色 完全分布式 一个集群中有N个节点，他们分别充当分布式中不同的角色，完成不同的任务 伪分布式环境搭建 下载安装包 Hado ...
分类：
其他好文 时间：
2020-10-26 11:17:07
阅读次数：
16
概述本文介绍如何利用腾讯云容器服务TKE的日志功能对日志进行采集、存储与查询，分析各种功能用法与场景，给出一些最佳实践建议。注:本文仅适用于TKE集群。如何快速上手?TKE的日志功能入口在集群运维-日志规则，更多关于如何为TKE集群启用日志采集与基础用法，参考官方文档日志采集。技术架构是怎样的?TKE集群开启日志采集后，tke-log-agent作为DaemonSet部署在每个节点上，负责根据采集
分类：
其他好文 时间：
2020-10-24 11:45:15
阅读次数：
27
一、Rook、ceph简介Ceph分布式存储系统Ceph是一种高度可扩展的分布式存储解决方案，提供对象、文件和块存储。在每个存储节点上，您将找到Ceph存储对象的文件系统和CephOSD（对象存储守护程序）进程。在Ceph集群上，您还可以找到CephMON（监控）守护程序，它们确保Ceph集群保持高可用性。RookRook是一个开源的cloud-nativestorage编排,提供平台和框架；为各
分类：
其他好文 时间：
2020-10-24 11:43:42
阅读次数：
23
简介Linux持续不断进军可扩展计算空间，特别是可扩展存储空间，Ceph最近加入到Linux中令人印象深刻的文件系统备选行列，它是一个分布式文件系统，能够在维护POSIX兼容性的同时加入了复制和容错功能Ceph生态系统架构可以划分为四部分：1、Clients：客户端（数据用户）2、cmds：Metadataservercluster，元数据服务器（缓存和同步分布式元数据）3、cosd：Object
分类：
其他好文 时间：
2020-10-22 23:13:23
阅读次数：
52
