数据存储重要性: 数据是企业最重要的财产; 数据可靠性是企业的命根,一定要保证。 单机存储原理: 存储引擎:存储系统的发动机,它决定存储系统的功能和性能; 引擎类型:哈希存储引擎、B树存储引擎、LSM存储引擎 哈希存储引擎:基于哈希表结构 :数组+链表;支持Create\Update\Delete\... ...
分类:
其他好文 时间:
2016-11-14 00:50:16
阅读次数:
185
防伪码:出淤泥而不染,濯清涟而不妖第五章LVS负载均衡群集前言:在各种互联网应用中,随着站点对硬件性能、相应速度、服务稳定性、数据可靠性等要求越来越高,单台服务器将难以承担所有的访问,除了使用价格昂贵的大型机、专用负载分流设备以外,企业还有另外一种选择来解决难..
分类:
其他好文 时间:
2016-10-31 00:57:14
阅读次数:
321
随着NANDFlash价格的不断下降,NVMeSSD正在慢慢普及。NVMeSSD由于极高的性能常被用作数据缓存,即使NVMeSSD发生故障,数据还在持久化介质中存储,不会导致数据丢失等严重事件。随着NVMeSSD的大量使用,其逐渐被用作持久化存储介质,替代传统磁盘。一旦NVMeSSD被用作持久化介质..
分类:
其他好文 时间:
2016-10-08 21:24:40
阅读次数:
230
前几个月对近两年Facebook和Google发表的两篇SSD故障分析的文章进行了阅读,并进行了整理。Google的在今年的FAST会议上发表了《FlashReliabilityinProduction:TheExpectedandtheUnexpected》,在这篇文章中通过收集长达六年的数据对SSD可靠性进行了研究,并且对比了SSD与HDD之..
分类:
其他好文 时间:
2016-09-21 23:21:22
阅读次数:
141
对于变化频率非常快的数据来说,如果还选择传统的静态缓存方式(Memocached、File System等)展示数据,可能在缓存的存取上会有很大的开销,并不能很好的满足需要,而Redis这样基于内存的NoSQL数据库,就非常适合担任实时数据的容器。但是往往我们又有数据可靠性的需求,采用MySQL作为 ...
分类:
数据库 时间:
2016-08-15 13:04:13
阅读次数:
287
原文转自:http://blog.csdn.net/zhangskd/article/details/7174682 超时重传是TCP协议保证数据可靠性的一个重要机制,其原理是在发送一个数据以后就开启一个计时器,在一定时间内如果没有得到发送数据报的ACK报文,那么就重新发送数据,直到发送成功为止。这 ...
分类:
其他好文 时间:
2016-05-07 13:04:34
阅读次数:
187
RAID的类型和级别RAID实现的方式分为:外接式磁盘阵列:通过扩展卡提供适配能力。内接式RAID:主板集成RAID控制器。组成RAID阵列的不同方式成为RAID级别不同的RAID级别,不同的存储性能,不同的数据可靠性,不同的存储成本。RAID0的工作原理:指把多个硬盘按照一定的算法组合起来..
分类:
其他好文 时间:
2016-03-18 02:01:47
阅读次数:
424
转自:http://www.csdn.net/article/2015-06-21/2825011摘要:眼下大数据领域最热门的词汇之一便是流计算了,而其中最耀眼的无疑是来自Spark社区的SparkStreaming项目。 对于流计算而言,最核心的特点毫无疑问就是它对低时的需求,但这也带来了相关的数...
分类:
其他好文 时间:
2016-01-19 15:50:42
阅读次数:
164
一.RAID原理随着计算机和网络技术的高速发展对存储性能和数据可靠性的要求不断的提高,单个的磁盘设备已经不能够满足速度以及安全性方面的要求RAID(独立磁盘阵列设备):多个独立的物理硬盘按照不同的方式组合起来,形成一个虚拟的硬盘raid是如何实现磁盘组合的呢?1.如果想要..
分类:
其他好文 时间:
2016-01-04 00:13:24
阅读次数:
326
Storm的数据可靠性(理论) Storm的数据可靠性(理论)我们都知道,分布式计算系统一般都管理着许多的机器。我们假设,现在有1000台机器的集群,假设每天每台机器出故障的几率只有1/1000,也就是说三年出一次...
分类:
其他好文 时间:
2015-12-12 18:46:28
阅读次数:
196