HBase [TOC] 本文实际上是《HBase不睡觉书》的重点归纳。该书不涉及:集群备份、ACL权限控制、REST客户端等。而对于一些不算常用的技术,书中也提示可略过(“集群搭建”除外),本文便以“略”表示。 基础 NoSQL 关系型数据库在大数据情况下受到并发和关联等复杂查询的影响而导致性能下降 ...
分类:
其他好文 时间:
2019-02-20 13:26:11
阅读次数:
747
最近公司计划将目前托管在数据中心服务器环境迁移到阿里云,过程中涉及到服务器规划、申请、服务搭建、数据同步以及运维监控,特撰文记录。下面是服务端环境规划:我的工作从数据服务组的准备开始,包括如下内容:mysql高可用搭建mongo集群搭建redis集群搭建rabbitmq搭建数据迁移方案分别会用五篇文章记录下,以此迎接2019新年。
分类:
其他好文 时间:
2019-02-18 19:00:39
阅读次数:
201
原文:asp.net core 负载均衡集群搭建(centos7+nginx+supervisor+kestrel) 概述 概述 本文目的是搭建三台asp.net core 集群, 并配上 nginx做负载均衡 首先准备要运行的源码 首先准备要运行的源码 http://pan.baidu.com/s ...
分类:
Web程序 时间:
2019-02-18 10:15:25
阅读次数:
264
配置环境为centos6.8 下载tomcat程序到服务器,并解压启动服务测试 [root@hadoop01 ~]# wget http://apache.claz.org/tomcat/tomcat-8/v8.5.37/bin/apache-tomcat-8.5.37.tar.gz [root@h... ...
分类:
其他好文 时间:
2019-02-14 20:43:06
阅读次数:
192
搭建kafka集群的基本环境需要安装JDK和zookeeper(或zookeeper集群) 下载kafaka安装包到服务器端并解压到指定目录 [root@hadoop01 soft]# wget https://www.apache.org/dyn/closer.cgi?path=/kafka/2.... ...
分类:
其他好文 时间:
2019-02-14 20:20:30
阅读次数:
166
序言 本文集群搭建为三台机器,cdh版本为5.13.0,以下是安装过程中所用到的软件包等,可以自行下载。一、前期准备1.安装环境 系统:centos7.5/最小安装版本/64位 内存:主节点 --> 32G/从节点 --> 16G 三台机器组成小集群(物理机) cdh01 cdh02 cdh03 需 ...
分类:
其他好文 时间:
2019-02-01 18:07:17
阅读次数:
207
1、下载rocketmq包 2、解压zip包 3、编译部署 4、配置环境变量 5、启动 NameServer(每台机器都要启动) 6、启动broker(每台机器都要) 7、测试验证 1、下载rocketmq包 下载地址:http://rocketmq.apache.org/dowloading/re ...
分类:
其他好文 时间:
2019-01-31 18:17:18
阅读次数:
234
kafka入门:简介、使用场景、设计原理、主要配置及集群搭建(转) 问题导读: 1.zookeeper在kafka的作用是什么? 2.kafka中几乎不允许对消息进行“随机读写”的原因是什么? 3.kafka集群consumer和producer状态信息是如何保存的? 4.partitions设计的 ...
分类:
其他好文 时间:
2019-01-29 18:17:29
阅读次数:
147
#### 大数据课程第二天 HDFS配置集群的原理分析 ssh免密登陆 通过工具生成公私钥对 公钥发送远程主机 修改slave文件 HDFS的集群搭建 ssh免密登陆 清除mac地址的影响 设置网络 安装hadoop,jdk NameNode持久化[了解] 什么是NameNode的持久化 FSIma ...
分类:
其他好文 时间:
2019-01-26 18:01:48
阅读次数:
194