分布式系统为了保证其可靠性，一般都会多节点提供服务，各别节点的故障不会影响系统的可用性。对于分布式的存储系统来说，在保证可用性的同时，数据的可靠性（不丢失）也是其要解决的核心问题。目前通用的方案是使用多副本存储。这就会引入一个新的问题，分布式存储系统的又一核心问题——多个副本间的数据一致性保障。所以就有了各种数据一致性协议。例如：Zookeeper的Zab、Etcd使用的Raft和无比复杂的Pax
分类：
其他好文 时间：
2020-05-21 17:45:45
阅读次数：
57
FastDFS 介绍 FastDFS 是一个 C 语言实现的开源轻量级分布式文件系统,作者余庆(happyfish100),支持 Linux、 FreeBSD、 AID 等 Unix 系统,解决了大数据存储和读写负载均衡等问题,适合存储 4KB~500MB 之间的小文件,如图片网站、短视频网站、文档 ...
分类：
其他好文 时间：
2020-05-10 16:43:20
阅读次数：
70
加入依赖 net.oschina.zcx7878 fastdfs-client-java 1.27.0.0yml中配置spring: servlet: multipart: max-file-size: 10MB max-request-size: 10MBfdfs_clients.confconn... ...
分类：
其他好文 时间：
2020-05-01 21:04:59
阅读次数：
73
HBase作为一个分布式存储的数据库，它是如何保证可用性的呢？对于分布式系统的CAP问题，它是如何权衡的呢？ 最重要的是，我们在生产实践中，又应该如何保证HBase服务的高可用呢？ 下面我们来仔细分析一下。 1. 什么是分布式系统的CAP？ CAP是指一致性（Consistency）、可用性（Ava ...
分类：
其他好文 时间：
2020-04-26 10:59:28
阅读次数：
63
1、Hadoop概述 1.1 Hadoop是什么 Hadoop是Apache旗下的一个用java语言实现开源软件框架，是一个开发和运行处理大规模数据的软件平台 1.2 核心组件 分布式存储系统 HDFS（Hadoop Distributed File System），提供了高可靠性、高扩展性和高吞吐 ...
分类：
其他好文 时间：
2020-04-25 19:07:28
阅读次数：
107
redis cluster最最基础的一些知识 redis cluster: 自动，master+slave复制和读写分离，master+slave高可用和主备切换，支持多个master的hash slot支持数据分布式存储 停止之前所有的实例，包括redis主从和哨兵集群 1、redis clust ...
分类：
其他好文 时间：
2020-04-20 23:33:26
阅读次数：
80
使用场景 大数据：数据量和速率激增，数据类型越来越复杂 应用开发：消息引擎，应用解耦，分布式存储，流处理 Kafka的体系结构 topic : 主题（消息的逻辑分类） 客户端： 细分为生产者（朝主题发送消息）， 消费者（读取主题的消息）； 服务端： broker (1 处理客户端发送和提供消费支持 ...
分类：
其他好文 时间：
2020-04-17 11:08:28
阅读次数：
73
一、监控系统概论监控系统在这里特指对数据中心的监控，主要针对数据中心内的硬件和软件进行监控和告警。企业的IT架构逐步从传统的物理服务器，迁移到以虚拟机为主导的IaaS云。无论基础架构如何调整，都离不开监控系统的支持。不仅如此。越来越复杂的数据中心环境对监控系统提出了更越来越高的要求：需要监控不同的对象，例如容器，分布式存储，SDN网络，分布式系统。各种应用程序等，种类繁多，还需要采集和存储大量的监
分类：
其他好文 时间：
2020-04-15 09:31:10
阅读次数：
200
Prometheus(普罗米修斯) 新型完整的监控告警工具 主要特点： 1. 多维数据模型，时间序列数据由度量名称和键/值对标识 2. 一种灵活的查询语言来利用这种维度 3. 不依赖分布式存储;单个服务器节点是自治的 4. 时间序列收集通过HTTP上的拉模型进行 5. 通过中间网关支持时间序列的推送 ...
分类：
其他好文 时间：
2020-04-10 00:22:22
阅读次数：
361
云服务器有哪些用途？云服务器主要用途是实现存储功能（分布式）、实现计算功能（分布式）、实现资源整合功能等，云计算以分布式存储和分布式计算为核心，通过采用虚拟化的方式来实现资源的动态管理，通过资源整合的方式来实现自身功能的扩充。云服务器，又可以称为云主机，向目标用户供给共用化的互联网基础设施服务。面向客户群体，主要是：中小企业及高端个人用户、大中型互联网用户等。云服务器用途，比较广泛的是以下几种：w
分类：
其他好文 时间：
2020-04-09 16:46:57
阅读次数：
88
