一 整体介绍 1.1 硬件环境 本文使用三台服务器搭建hadoop集群，使用Centos7.5系统，服务器均有独立ip 1.2 部署的软件 部署服务：namenode（HA）,resourcemanager（HA）,zookeeper，hbase（HA）,spark,kafka,geomesa 版本 ...
分类：
其他好文 时间：
2019-12-31 14:12:21
阅读次数：
94
靶机链接： https://www.vulnhub.com/entry/ha-chakravyuh,388/ 主机探测扫描： 端口扫描： ╰─ nmap -p- -sC -sV 10.10.202.131 FTP 匿名访问 下载压缩文件，解压缩需要密码，基本套路一直，需要密码，接下来就是找解压密码的 ...
分类：
其他好文 时间：
2019-12-31 10:41:13
阅读次数：
112
一、基础环境 1.虚拟机 VMware 15.0 2.CentOS 6.5 Linux 系统 二、MapReduce的原理分析 三、Yarn集群搭建 1.准备好三台虚拟机（这里我直接拷贝了Ha集群中一个作为主机，其余克隆） 2.修改基础配置： 1.删除每一台机器的Mac地址（CentOS 7 以上不 ...
分类：
其他好文 时间：
2019-12-30 23:15:14
阅读次数：
116
通常情况下为了redis的高可用，我们一般不会使用redis的单实例去运行，一般都会搭建一个 redis 的集群去运行。此处记录一下 redis5 以后 cluster 集群的搭建。 一、需求1.redis5的安装2.搭建一个3主3从的集群3.动态的往集群中增加节点?|- 增加一个主节点?|- 增加 ...
分类：
其他好文 时间：
2019-12-30 14:17:50
阅读次数：
62
本文从数据倾斜的危害、现象、原因等方面，由浅入深阐述Spark数据倾斜及其解决方案。 ...
分类：
其他好文 时间：
2019-12-30 11:24:02
阅读次数：
99
1 import pandas as pd 2 import numpy as np 3 import matplotlib.pyplot as plt 4 from sklearn.cluster import KMeans # 导入k-means 5 6 7 def build_data(): ...
分类：
编程语言 时间：
2019-12-29 20:12:10
阅读次数：
95
1 import pandas as pd 2 import numpy as np 3 from sklearn.cluster import KMeans 4 import matplotlib.pyplot as plt 5 6 7 def stand_sca(data): 8 """ 9 标 ...
分类：
其他好文 时间：
2019-12-29 20:10:30
阅读次数：
201
service 对应的概念 用 namespace, group, serviceName 标识一个服务 从该属性可以看出服务的层级 服务和实例的对应关系 service, cluster, instance 从 2 个方法可以看出实例的层级 但是服务还有另外一种扁平的数据结构 以临时服务为例Dis ...
分类：
其他好文 时间：
2019-12-29 18:24:09
阅读次数：
442
一、安装dashboard 首先参考官方文档：https://kubernetes.io/docs/tasks/access-application-cluster/web-ui-dashboard/ 官方的安装命令如下： 当有多个节点时，安装到非主节点时，会出现一些问题。dashboard使用ht ...
分类：
Web程序 时间：
2019-12-29 18:07:27
阅读次数：
159
一、安装 Seafile官网下载页面：https://www.seafile.com/download/ ，获取7.0.5版本的下载地址 登录pi的命令，转到root，然后下载 #sudo -s #cd /nas root@midou:/nas# wget https://github.com/ha ...
分类：
其他好文 时间：
2019-12-29 14:43:59
阅读次数：
131
