step 0：安装网卡绑定的功能 apt-get install ifenslave step 1：加载内核模块：编辑 /etc/modules，添加： step 2：编辑网卡配置：/etc/network/interfaces ...
分类：
系统相关 时间：
2018-12-14 22:41:09
阅读次数：
412
安装基于CentOS 7 安装，系统非最小化安装，选择部分Server 服务，开发工具组。全程使用root用户，因为操作系统的权限、安全，在启动时会和使用其它用户有差别。Step 1:下载hadoop.apache.org 选择推荐的下载镜像结点； https://hadoop.apache.org ...
分类：
其他好文 时间：
2018-12-13 19:20:31
阅读次数：
268
需求：还是redis-trib.rb脚本获取的信息不足或者太繁杂，这里给出更加直观的一种方法， 说明：已在4.x版本测试通过，3.x不可用。 原生的输出 编写脚本直观获取 ...
分类：
其他好文 时间：
2018-12-13 19:16:33
阅读次数：
176
一.为什么要大数据学习？ 这是一个大数据的时代，一个企业只有掌握了大数据才能把握住市场的命脉，一个人掌握了大数据就可以比较轻松的向机器学习、人工智能等方向发展。所以我们有必要去掌握大数据的技术同时也关注大数据的发展趋势，不能裹足不前。 二.关于本专题的学习 作为一个普通本科大学生，在校的大数据学习比 ...
分类：
其他好文 时间：
2018-12-13 01:17:07
阅读次数：
223
注：图片如果损坏，点击文章链接：https://www.toutiao.com/i6627365258090512909/ 安装好虚拟机（3个节点） YUM源已安装好、系统版本CentOS6.5、java版本是1.7，三个节点，其中一个节点完成Hadoop安装后，启动之前克隆两台节点，并完成hado ...
分类：
其他好文 时间：
2018-12-07 12:04:08
阅读次数：
208
MySQL 5.6 对复制功能提供了新特性：slave 支持 crash-safe，可以解决之前版本中系统异常断电可能导致的 SQL thread 信息不准确的问题。 原文：Enabling crash-safe slaves with MySQL 5.6 可以对从库进行配置 crash-safe ...
分类：
数据库 时间：
2018-12-05 01:55:08
阅读次数：
177
1.说明： Spark Standalone 集群是Master--Slaves架构的集群模式，和大部分的Master--Slaves 结构集群一样，存在着Master单点故障的问题。Spark提供了两种解决方案去解决这个单点故障的问题； 方案一：基于文件系统的单点恢复 主要用于开发或测试环境，sp ...
分类：
其他好文 时间：
2018-12-04 11:23:35
阅读次数：
10140
1、cdh在spark的conf中没有slaves文件解决方法：在spark的conf目录下添加slaves文件，内容为worker节点名2、yarn的端口和spark的worker端口冲突都是7337，导致worker进程不能正常工作解决办法：在spark的conf目录下修改spark-default.conf文件，把里面的7337端口改成其他的端口
分类：
其他好文 时间：
2018-11-30 17:35:18
阅读次数：
744
集群配置： jdk1.8.0_161 hadoop-2.6.1 zookeeper-3.4.8 linux系统环境：Centos6.5 3台主机：master、slave01、slave02 Hadoop HA集群搭建（高可用）： 设置静态IP地址 为普通用户添加sudo权限 服务器网络设置：NAT ...
分类：
其他好文 时间：
2018-11-23 12:31:38
阅读次数：
232
基础参考:https://www.cnblogs.com/wang-li/p/9955303.html 配置文件讲解 1.sentinel monitor 2.sentinel down-after-milliseconds SDOWN log如下: 通过上面的log,可以发现，此3个log都是主观 ...
分类：
其他好文 时间：
2018-11-16 23:33:52
阅读次数：
297
