Tachyon是一个分布式内存文件系统,可以在集群里以访问内存的速度来访问存储在Tachyon里的文件。Tachyon是架构在最底层的分布式文件系统和上层的各种计算框架之间的一种中间件,其主要职责是将那些不需要落地到D...
分类:
其他好文 时间:
2015-02-11 23:27:01
阅读次数:
695
tmpfs介绍tmpfs是一种虚拟内存文件系统,而不是块设备。是基于内存的文件系统,创建时不需要使用mkfs等初始化它最大的特点就是它的存储空间在VM(virtual memory),VM是由linux内核里面的vm子系统管理的。linux下面VM的大小由RM(Real Memory)和swap组成...
分类:
系统相关 时间:
2015-02-10 13:04:56
阅读次数:
198
转载:http://blog.csdn.net/wxwsixis/article/details/5752186前几天发现服务器的内存(ram)和swap使用率非常低,于是就想这么多的资源,不用岂不浪费了?google了一下,认识了tmpfs,总的来说tmpfs是一种虚拟内存文件系统,正如这个定义它...
分类:
系统相关 时间:
2015-02-02 12:23:53
阅读次数:
260
转自:http://blog.csdn.net/u014252240/article/details/41810849发布人:南京大学PASA大数据实验室顾荣1. Tachyon是什么Tachyon(/'tæki:??n/ 意为超光速粒子)是以内存为中心的分布式文件系统,拥有高性能和容错能力,能够为...
分类:
其他好文 时间:
2015-01-27 10:53:42
阅读次数:
3558
使用内存文件系统后系统内存统计方法【问题描述】 在Linux系统中,内存可以分出一部分空间作为磁盘来使用,称为Ramdisk。这部分内存空间具有高速读写 www.ahlinux.com 特性,可以存储那些对磁盘IO要求较高的数据,显著的提升系统的服务性能。 Ramdisk分为两种,一种是固定空间大小...
分类:
其他好文 时间:
2015-01-19 10:34:58
阅读次数:
156
小练习:求二叉树的深度和宽度、内存文件系统。...
分类:
其他好文 时间:
2014-12-10 01:53:12
阅读次数:
224
TachyonWorker 负责和tachyonMaster 交互, 直接通过 apache thrift 发送消息
tachyonworker 主要负责 3个部分, 启动 dataserver , 心跳, 和 thrift server ,
其中 dataserver 负责内存数据和用户之间的读传输,目前thrift支持远程读数据, 写数据只能写到本地, 并对本地读取做了优化,...
分类:
其他好文 时间:
2014-11-30 23:16:57
阅读次数:
214
UCBerkeley研发的Tachyon(超光子['tæki???n],名字要不要这么太嚣张啊:)是一款为各种集群并发计算框架提供内存数据管理的平台,也可以说是一种内存式的文件系统吧。如下图,它就处于这样一个层次:在现有存储系统如HDFS之上,在Spark,MapReduce,Impala等各种计算框架之下。为什么要有这么一个框架呢?MapReduce就不说了,但像Spark这种内存计算框架,为什...
分类:
其他好文 时间:
2014-11-27 20:29:10
阅读次数:
287
CentOS 6.X启动流程 /boot分区 启动引导程序是默认可以识别boot分区的.因此在系统还无法加载硬盘的时候,boot分区是可以识别的! initramfs内存文件系统 CentOS 6.x中使用initramfs内存文件系统取代了CentOS 5.x中的initrd RAM Disk。他们的作用类似,可以通过启动引导程序加载到内存中,然后加载启动过程中所需要的内核模块[用来模拟真正的...
分类:
其他好文 时间:
2014-09-24 16:22:27
阅读次数:
223
linux启动过程:以前:vmlinuz内核初使始化,执行init进程挂载根文件系统,init进程也在根文件系统上,这就产生了矛盾。所以在设计上init进程在临时根文件系统initrd.img上,再去挂载真正的根文件系统。现在新版内核:采用initramfs,它是一个cpio格式的内存文件系统。后续。。。
分类:
系统相关 时间:
2014-06-17 18:12:22
阅读次数:
272