ceph是分布式存储,其中对于数据的存储规则是一个重点和难点。比如每个数据块的数据备份是3份,3份数据是怎么分布的?ceph的crush 就是解决数据分布规则的问题。 应用端直接使用的是pool,pool是由存储的基本单位pg组成,pg分布在磁盘逻辑单元osd上,osd一般是对应一块物理硬盘,osd分布在
分类:
其他好文 时间:
2018-07-09 12:28:13
阅读次数:
2313
首先我们了解一下各种raid卷的特性和原理。 1,raid0的特性:采用剥离,数据将在几个磁盘上进行分割。数据被分成很多数据块,每一数据块会被写入不同的磁盘。从而, 每一磁盘的工作负荷都得到了降低,这有助于加速数据传输。RAID-0可让磁盘更好地响应,尤其是电子邮件、数据库和互联网应用。实施RAID-0最少需 要两块硬盘。优势:通过把I/O负载分布到多个硬盘上,可提高系统性能。实施简单。需要注意的
分类:
系统相关 时间:
2018-07-08 23:08:52
阅读次数:
337
数据库存储结构分为:物理存储结构和逻辑存储结构。物理结构和逻辑结构分开,对物理数据的存储不会影响对逻辑结构的访问。1.物理存储结构 数据库文件 os block2.逻辑存储结构 tablespace 表空间 segment 段 extend 扩展区 db block 数据块(8k)2.1创建表空间c ...
分类:
数据库 时间:
2018-07-08 14:37:21
阅读次数:
209
一、LRU简介 LRU是Least Recently Used的缩写,即:最近最少使用。 它是内存管理中的一种页面置换算法,对于在内存中但是又不用的数据块,操作系统会根据哪些数据属于LRU而将其移除内存而腾出空间来加载另外的数据。 二、redis LRU 官方文章:https://redis.io/ ...
分类:
其他好文 时间:
2018-07-06 01:19:32
阅读次数:
240
HDFS的block是逻辑上的数据块.Hadoop2.0中每一块默认大小128MB,实际存储过程中block大小小于等128MB,它是以文件为存储对象.如一200MB大小文件,分两个数据块128MB+72MB 这里的两个块大实际小分别是128MB和72MB 算法分析: max(minSize, mi ...
分类:
其他好文 时间:
2018-07-04 16:11:35
阅读次数:
229
[20180625]oradebug peek 2.txt--//上个星期演示了oradebug peek查看内存数据块的情况,oradebug peek {address} length 1,最后的参数1可以实现转储到跟踪文件.--//以前也使用oradebug查看sql语句在共享池的父游标.采用 ...
分类:
其他好文 时间:
2018-06-30 23:02:20
阅读次数:
202
[20180630]truncate table的另类恢复2.txt--//上个星期做了truncate table的另类恢复,通过修改数据块的段号,再通过rowid定位收集数据,达到修复的目的.--//实际上不能作为恢复的手段,主要不实用,不过通过学习了解oracle一些基本概念.--//链接:b ...
分类:
其他好文 时间:
2018-06-30 22:57:40
阅读次数:
224
标准的Oracle数据文件最多可以包含4194303个Oracle数据块。所以这也表示单个数据文件大小的上限取决于所用的Oracle块大小。(MOSID112011.1)SQL>SELECTTO_CHAR(4194303*VALUE,‘999,999,999,999‘)MAX_BYTES,TO_CHAR(TRUNC(4194303*VALUE/1024),‘999,999,999‘)||‘K
分类:
数据库 时间:
2018-06-30 20:54:40
阅读次数:
226
元数据 什么是元数据 任何文件系统中的数据分为数据和元数据。数据是指普通文件中的实际数据,而元数据指用来描述一个文件的特征的系统数据,诸如访问权限、文件拥有者以及文件数据块的分布信息(inode...)等等。在集群文件系统中,分布信息包括文件在磁盘上的位置以及磁盘在集群中的位置。用户需要操作一个文件 ...
分类:
其他好文 时间:
2018-06-30 20:23:40
阅读次数:
146
主要总结数据库写脏块的机制。 当一个进程要进行修改数据块的时候 1、获取cbc latch 2、修改buffer pin status 3、释放cbc latch 4、生成redo记录 5、修改buffer数据块 6、将脏块移到检查点队列中,到此才算修改完毕 7、获得cbc latch 8、修改bu ...
分类:
数据库 时间:
2018-06-24 23:53:14
阅读次数:
292