安装环境： 1核 2g jdk1.8+ 1. 下载 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.2.2.tar.gz 2. 解压 tar -zxvf elasticsearch-6.2.2.tar ...
分类：
其他好文 时间：
2019-01-10 15:37:02
阅读次数：
224
# class Htext(object): # def __init__(self,slash,time=None): # self.time=time # self.ha="ha" # self.slash=slash # def __setattr__(self, key, value): #... ...
分类：
其他好文 时间：
2019-01-10 15:33:29
阅读次数：
97
一、YARN 简介 YARN(Yet Another Resource Negotiator,资源协调者) 是一种新的Hadoop 资源管理器，是一个通用的资源管理系统，可以为上层应用提供统一的资源管理和调度。它的引入为集群在利用率，资源统一管理和数据共享方面带来了很大的好处。 YARN 是随着Ha ...
分类：
其他好文 时间：
2019-01-09 23:35:36
阅读次数：
350
需要：实现类似redis-trib.rb call 命令的功能，输出redis cluster集群所有节点指定的参数的配置 redis-trib.rb的输出 编写脚本 测试结果 ...
分类：
其他好文 时间：
2019-01-09 20:30:52
阅读次数：
437
一 etcd发现简介 1.1 需求背景 在实际环境中，集群成员的ip可能不会提前知道。如使用dhcp自动获取的情况，在这些情况下，使用自动发现来引导etcdetcd集群，而不是指定静态配置，这个过程被称为“发现”。 etcd Discovery 使用已有的 etcd cluster 来注册和启动 D ...
分类：
其他好文 时间：
2019-01-09 18:47:34
阅读次数：
228
java操作redis cluster集群可使用jredis php要操作redis cluster集群有两种方式： 1、使用phpredis扩展，这是个c扩展，性能更高，但是phpredis2.x扩展不行，需升级phpredis到3.0，但这个方案参考资料很少 2、使用predis，纯php开发， ...
分类：
Web程序 时间：
2019-01-09 17:31:08
阅读次数：
194
1 集群介绍 Redis Cluster 是 redis的分布式解决方案，在3.0版本正式推出 当遇到单机、内存、并发、流量等瓶颈时，可以采用Cluster架构方案达到负载均 衡目的。 Redis Cluster之前的分布式方案有两种： 客户端分区方案，优点分区逻辑可控，缺点是需要自己处理数据路由， ...
分类：
其他好文 时间：
2019-01-09 11:15:34
阅读次数：
211
开启三台虚拟机：192.168.80.103192.168.80.104192.168.80.105在80.103里：systemctlstopfirewalldsetenforce0yuminstalllrz*-y把haproxy拉入Xshelltarxfhaproxy-1.5.15.tar.gz-C/opt///解压包并且放入文件中cd/opt/haproxy-1.5.15/源码编译安装hap
分类：
其他好文 时间：
2019-01-08 16:41:10
阅读次数：
157
1. order by Hive中的order by跟传统的sql语言中的order by作用是一样的，会对查询的结果做一次全局排序，所以说，只有hive的sql中制定了order by所有的数据都会到同一个reducer进行处理（不管有多少map，也不管文件有多少的block只会启动一个reduc ...
分类：
其他好文 时间：
2019-01-08 12:32:08
阅读次数：
127
（1）部署部署方式：sparkstandalone集群、yarn集群、meoss集群...driver的HA：如果希望driver程序在失败之后自动重启，那么需要在程序中使用getOrcreate方法重构streamingContext对象，以及在spark-submit中添加参数。Checkpoint目录的设置：如果程序使用到checkpoint目录，就必须配置一个hdfs兼容的文件系统作为ch
分类：
其他好文 时间：
2019-01-08 10:52:20
阅读次数：
177
