集群配置： jdk1.8.0_161 hadoop-2.6.1 zookeeper-3.4.8 linux系统环境：Centos6.5 3台主机：master、slave01、slave02 Hadoop HA集群搭建（高可用）： 设置静态IP地址 为普通用户添加sudo权限 服务器网络设置：NAT ...
分类：
其他好文 时间：
2018-11-23 12:31:38
阅读次数：
232
一、Hadoop HA 机制的学习 1.1、Hadoop 2.X 的架构图 2.x版本中，HDFS架构解决了单点故障问题，即引入双NameNode架构，同时借助共享存储系统来进行元数据的同步，共享存储系统类型一般有几类，如：Shared NAS+NFS、BookKeeper、BackupNode 和 ...
分类：
其他好文 时间：
2018-11-22 16:06:00
阅读次数：
623
前面几课我们已经把ES的基本概念和查询了解了，大家知道ES的核心优势就是天生支持分布式，所以，这课我们专门讲讲怎么搭建实现ES的集群部署。 ES分布式原理 1、es分布式概念 主分片（Primary shard） 索引的子集，索引可以切分成多个分片，分布到不同的集群节点上。分片对应的是 Lucene ...
分类：
其他好文 时间：
2018-11-22 12:25:36
阅读次数：
185
参考: "[ Kubernetes 权威指南 ]" Kubernetes 集群搭建可以参考 "[ Kubernetes : 多节点 k8s 集群搭建实践 ]" 在多个 Node 组成的 Kubernetes 集群内, Kubernetes 本身不会对跨主机容器网络进行设置. flannel 就是解决 ...
分类：
Web程序 时间：
2018-11-21 16:09:35
阅读次数：
273
一、前言 1、上一文搭建好了Hadoop单机模式，这一文继续搭建Hadoop集群 二、搭建Hadoop集群 1、根据上文的流程得到两台单机模式的机器，并保证两台单机模式正常启动，记得第二台机器core-site.xml内的fs.defaultFS参数值要改成本机的来启动，启动完毕后再改回来 2、清空 ...
分类：
其他好文 时间：
2018-11-21 11:01:35
阅读次数：
171
集群机器的分布情况： 1.storm集群依赖于zookeeper，所以要先保证zookeeper集群的正确运行。 2. 搭建Storm集群环境 cd /export/software/ rz 上传apache-storm-1.1.1.tar.gz tar -xvf apache-storm-1.1. ...
分类：
其他好文 时间：
2018-11-19 17:24:50
阅读次数：
150
如果XXL-Job admin挂掉就完蛋了，所有任务无法执行 调度中心：管理任务的触发 调度中心如何实现集群？ XXL-Job如何实现集群？ 底层已经实现好了！文档里面有的 如果想实现Job集群： DB配置一样 登录账号一样 集群机器时钟保持一致（单机集群忽略） 建议：推荐通过Nginx为调度中心集 ...
分类：
其他好文 时间：
2018-11-18 11:24:04
阅读次数：
2840
redis 1、简化版redis （本套Redis集群为简化版安装部署，只需解压至普通用户家目录下或者任意目录，解压后修改脚本，执行脚本后即可使用。） 注意，此版本需要在redis配置文件中添加 protected-mode no，确认添加完成后再启动服务。 1、单机部署 1.新建普通用户，将压缩包 ...
分类：
其他好文 时间：
2018-11-17 22:18:50
阅读次数：
194
我们所常见的电商搜索如京东，搜索页面都会提供各种各样的筛选条件，比如品牌、尺寸、适用季节、价格区间等，同时提供排序，比如价格排序，信誉排序，销量排序等，方便了用户去找到自己心里理想的商品。 站内搜索对于一个网站几乎是标配，只是搜索的强大与否的区别，有的网站只支持关键词模糊搜索，而淘宝，京东提供了精细 ...
分类：
其他好文 时间：
2018-11-15 23:16:38
阅读次数：
179
前面几篇文章详细讲解了 ElasticSearch 的搭建以及使用 SpringDataElasticSearch 来完成搜索查询，但是搜索一般都会有搜索关键字高亮的功能，今天我们把它给加上。 <! more 系列文章 一、 "和我一起打造个简单搜索之ElasticSearch集群搭建" 二、 "和 ...
分类：
编程语言 时间：
2018-11-15 23:15:09
阅读次数：
709
