一，服务准备 本案例用Linux虚拟机服务器来搭建HADOOP集群，所用的软件版本： Vmware 11.0 Contos 6.5 64bit 二，JDK环境安装 上传JDK安装包 》解压到指定目录 》配置环境变量 三，网络环境准备 1，将虚拟机的网络环境设置为NAT 2，修改主机名：vi /etc ...
分类：
其他好文 时间：
2018-10-07 10:30:41
阅读次数：
188
记一次ElasticSearch重启之后shard未分配问题的解决 环境 ElasticSearch6.3.2，三节点集群 Ubuntu16.04 一个名为user的索引，索引配置为：3 primary shard，每个primary shard 2个replica 正常情况下，各个分片的分布如下： ...
分类：
其他好文 时间：
2018-09-30 23:20:26
阅读次数：
3036
一、介绍 Replicat Set比起传统的Master - Slave结构而言，应用场景更加多，也有了自动failover的能力 二、副本集结构图（参考：https://www.linuxidc.com/Linux/2017-03/142379.htm） 类似于“MySQL中1主2从+mha_ma ...
分类：
数据库 时间：
2018-09-30 16:44:26
阅读次数：
224
数据预处理-异常值识别 from:http://shataowei.com/2017/08/09/%E6%95%B0%E6%8D%AE%E9%A2%84%E5%A4%84%E7%90%86-%E5%BC%82%E5%B8%B8%E5%80%BC%E8%AF%86%E5%88%AB/ 系统总结了常用的 ...
分类：
其他好文 时间：
2018-09-30 12:42:17
阅读次数：
272
容器按照持续运行的时间可以分为两类：服务类容器和工作类容器 服务类容器：持续提供服务 工作类容器：一次性任务，处理完后容器就退出 Deployment，replicaset和daemonset都用于管理服务类容器， 对于工作类的容器，我们用job 编辑一个简单的job类型的yml文件 1.apive ...
分类：
Web程序 时间：
2018-09-28 19:14:46
阅读次数：
282
本文来自网易云社区 作者：田宏增 Kafka的高可靠性的保障来源于其健壮的副本（replication）策略。通过调节其副本相关参数，可以使得Kafka在性能和可靠性之间运转的游刃有余。Kafka从0.8.x版本开始提供partition级别的复制,replication的数量可以在$KAFKA_H ...
分类：
其他好文 时间：
2018-09-28 12:57:37
阅读次数：
142
redis主从只是数据的备份，当主宕机后不会自动切换从为主，需要手动切换从为主。 哨兵就可以自动切换从为主， 集群 ...
分类：
其他好文 时间：
2018-09-20 12:22:07
阅读次数：
162
1.1 安装环境 1、jdk：要求jdk必须是1.7及以上版本 2、Mysql：推荐mysql是5.5以上版本 1.2 安装步骤 Mycat有windows、linux多种版本。本教程为linux安装步骤，windows基本相同。 第一步：下载Mycat-server-xxxx-linux.tar. ...
分类：
系统相关 时间：
2018-09-15 16:33:05
阅读次数：
210
上节回顾 在第一篇博文（Hadoop入坑之路（一））中，讲述了HDFS如何在服务器上搭建以及命令行客户端的一些基本命令的用法。这一节中主要讲在Java客户端上，实现Windows与HDFS服务器的数据的交互。 客户端与HDFS的数据交互 在运行Java客户端时，需要从官网上下载hadoop的源码包进 ...
分类：
其他好文 时间：
2018-09-11 18:06:45
阅读次数：
215
