标签:写文件 文件 情况 通讯 col 情况下 同步 操作 span
一、GFS
Google File System就是HDFS的前身
HDFS 参照了GFS的设计理念,大部分架构设计概念是类似的,比如 HDFS NameNode 相当于 GFS Master,HDFS DataNode 相当于 GFS chunkserver\
1.设计目标:
高性能的稳定网络带宽远比低延迟重要。目标程序绝大部分要求能够高速率的、大批量的处理数
据,极少有程序对单一的读写操作有严格的响应时间要求
2.架构:
一个 Chunk块为64MB
3.GFS的一致性模型:
尽量采用追加写入而不是覆盖,Checkpoint,自验证的写入操作,自标识的记录
二、BigTable
三、MapReduce
Google 三大经典论文研读:GFS、BigTable、MapReduce
标签:写文件 文件 情况 通讯 col 情况下 同步 操作 span
原文地址:https://www.cnblogs.com/shawshawwan/p/9204675.html