Windows 邮件槽(MailSlot)来自《Windows网络编程第二版 中文版》优点:通过网络,将一条消息广播给一台或多台计算机。缺点:只允许从客户机到服务器,建立一种不可靠的单向数据通信。不提供数据可靠性传播的保障。邮件槽是围绕Windows文件系统接口设计出来的。客户机和服务器应用需要使用...
HBase是一个可以进行实时读和写操作的分布式NoSQL系统,建立在HDFS之上,是Hadoop生态圈中重要的一部分。在HBase中底层存储结构采用的LSM-tree的方式进行处理,为了保证HBase的数据可靠性和可用性,HBase采用了多种方式,包括Snapshot、Replication...
分类:
其他好文 时间:
2015-05-20 00:06:11
阅读次数:
436
一、 磁盘阵列(RAID)1.磁盘阵列主要是在线存储,是一种採用RAID技术、冗余技术、在线维护技术来制造的一种高性能高可用的磁盘存储设备。2.磁盘阵列的核心技术是RAID技术。3.RAID技术:它攻克了单个磁盘容量的限制,攻克了单个磁盘速度的限制,攻克了数据可靠性问题。● RAID0,磁盘条带化,...
分类:
其他好文 时间:
2015-05-07 14:02:18
阅读次数:
102
今天很高兴为大家介绍最新的ECS存储服务:SSD云盘。 SSD云盘基于全SSD存储介质、利用阿里云飞天分布式存储技术,提供数据可靠性99.999%的高性能存储;该产品具备以下特点:l 高性能:单个SSD云盘最高提供10000随机读写IOPS、160MB/s吞吐量的存储性能;l 高可靠性:SSD云盘....
分类:
其他好文 时间:
2015-05-06 21:10:15
阅读次数:
225
[转]Reed Solomon纠删码 http://peterylh.blog.163.com/blog/static/12033201371375050233/纠删码是存储领域常用的数据冗余技术, 相比多副本复制而言, 纠删码能够以更小的数据冗余度获得更高数据可靠性。 Reed Solomon C...
分类:
其他好文 时间:
2015-05-04 01:05:02
阅读次数:
162
复制策略是hadoop文件系统最核心的部分,对读写性能影响很大,hadoop和其它分布式文件系统的最大区别就是可以调整冗余数据的位置,这个特性需要很多时间去优化和调整。
一、数据存放
目前hadoop采用以机柜为基础的数据存放策略,这样做的目的是提高数据可靠性和充分利用网络带宽。当前具体实现了的策略只是这个方向的尝试,hadoop短期的研究目标之一就是在实际产品环境中观察系统读写的行为,...
分类:
其他好文 时间:
2015-04-24 16:23:59
阅读次数:
241
对于变化频率非常快的数据来说,如果还选择传统的静态缓存方式(Memocached、File System等)展示数据,可能在缓存的存取上会有很大的开销,并不能很好的满足需要,而Redis这样基于内存的NoSQL数据库,就非常适合担任实时数据的容器。但是往往我们又有数据可靠性的需求,采用MySQL作为数据存储,不会因为内存问题而引起数据丢失,同时也可以利用关系数据库的特性实现很多功能。所以就会很自然...
分类:
数据库 时间:
2015-01-07 11:04:35
阅读次数:
360
一、概述ErasureCode可以应用于分布式存储系统中,替代多份数据拷贝的数据冗余方式,从而可以提高存储空间利用率。此外,Erasurecode还可以应用于传统RAID系统中,增加数据冗余度,支持多块盘同时发生故障,从而可以提高数据可靠性。采用范德蒙矩阵可以构建Erasurecode(关于范..
分类:
其他好文 时间:
2014-05-13 12:06:40
阅读次数:
648