（一）HA下配置spark 1，spark版本型号：spark-2.1.0-bin-hadoop2.7 2，解压，修改配置环境变量 3，修改spark-env.sh文件 4，修改slaves文件 5，分发及启动 各个节点jps情况： [root@ha1 spark-2.1.0]# jps 2464 ...
分类：
其他好文 时间：
2017-08-06 20:45:14
阅读次数：
209
需求案例：需要把字符串存入数据库，并且要求数据库中不能有重复的字符串，由此就引出了将字符串hash成特定的hash值，依靠查询hash值是否重复来判断字符串是否重复。这样做的好处在于查询重复字符串的代价太大，因为字符串可能会非常长，进行逐个比较非常消耗数据库的性能，如果将字符串hash之后，依靠ha ...
分类：
Web程序 时间：
2017-08-06 15:55:20
阅读次数：
282
1. HA服务器配置 对hdfs做高可用 1.1服务器详情 服务器：centos7 Hadoop:2.6.5 Jdk:1.8 共四台服务器 192.168.1.111 node1 192.168.1.112 node2 192.168.1.113 node3 192.168.1.114 node4 ...
分类：
其他好文 时间：
2017-08-06 15:54:18
阅读次数：
383
HA是High Availability缩写，即高可用性 ，可防止网络中由于单个防火墙的设备故障或网络故障导致网络中断，保证网络服务的连续性和安全强度。目前，ha功能已经是防火墙内一个重要组成部分。 主备模式（Active-standby）：在一个冗余组中，有两台防火墙，一台处于主状态。在这个状态下 ...
分类：
其他好文 时间：
2017-08-05 18:55:09
阅读次数：
163
一，概念 hive:是一种数据仓库，数据储存在：hdfs上，hsql是由替换简单的map-reduce，hive通过mysql来记录映射数据 二，安装 1，mysql安装： 1，检测是否有mariadb 2，安装前准备： 3，配置mysql： 2，hive安装(hive-2.1.1) 1，安装前配置 ...
分类：
其他好文 时间：
2017-08-02 19:59:23
阅读次数：
198
Heartbeat简介
Heartbeat项目是Linux-HA工程的一个组成部分，它实现了一个高可用集群系统。心跳服务和集群通信是高可用集群的两个关键组件，在Heartbeat项目里，由heartbeat模块实现了这两个功能。Heartbeat结构图基准层：（心跳传递层）运行在每一个节点，通过组播的方式传寄..
分类：
系统相关 时间：
2017-07-31 22:07:24
阅读次数：
239
########hearbeat####server1yuminstall-yheartbeat-*cd/usr/share/doc/heartbeat-3.0.4/cpha.cfauthkeysharesources/etc/ha.d/cd/etc/ha.d/vim/ha.cf48keepalive255deadtime3060warntime1070initdead6075udpport71790bcasteth0156auto_failbackon210nodeserver1211nodeserver4..
分类：
其他好文 时间：
2017-07-30 23:31:48
阅读次数：
225
2016年是Hadoop的十周年生日，在今年，CSDN将以技术和实战为主题与大家共同为Hadoop庆生。其主要内容包含Hadoop专业词典、系列视频技术解析、Hadoop行业实践、线上问答、线下沙龙、大范围征文等多个环节。而本期“我与Hadoop不得不说的故事”则属于大范围征文中的一章。 “我与Ha ...
分类：
其他好文 时间：
2017-07-30 19:55:00
阅读次数：
142
oracle HA 高可用性具体解释（之二，深入解析TAF，以及HA框架） :http://blog.csdn.net/panfelix/article/details/38436197 一、HA FAILOVER，Oracle RAC的高可用性的技术基础是Failover。就是指集群中的热河一个节 ...
分类：
数据库 时间：
2017-07-30 15:41:16
阅读次数：
483
