为什么计算也要分布式 使用HDFS可以把文件分割为一个一个的片段,然后存储在各个节点上,同时为了保证高可靠性,存的是3副本。 这一切的操作对客户端都是透明的,它仍然是觉得是在对同一个文件进行操作。这样就可以把海量的Web日志文件存储到了HDFS当中。 但是存储架构已经分布式了,如果只有一个节点把所有 ...
分类:
其他好文 时间:
2018-03-06 13:48:20
阅读次数:
206
Ceph是什么 什么是Ceph?首先我们应该明确,Ceph是一种 分布式存储系统 ,所谓 分布式 ,指的是Ceph可以部署在多台服务器上,通过多台服务器并行处理来对外提供高性能的读写块。 同时Ceph除了能提供块存储,还可以提供文件存储、对象存储。 Ceph的优势 实际上Ceph不是一个才出现的开源 ...
分类:
其他好文 时间:
2018-03-04 16:01:38
阅读次数:
139
一键安装nginx和fsfs分布式文件存储shell脚本
分类:
系统相关 时间:
2018-03-04 14:26:53
阅读次数:
290
其实ceph存储是底层的规范,应该在部署kubernetes集群前就准备好的,使他为k8s集群提供存储服务。可以用来存储pod,docker镜像,日志数据等 ceph概述 Ceph 是一个分布式存储系统,独一无二地用统一的系统—Ceph 存储集群,提供了对象存储,块存储和文件存储三种功能。Ceph ...
分类:
其他好文 时间:
2018-03-04 10:33:52
阅读次数:
542
概述分布式文件系统:Distributedfilesystem,DFS,又叫做网络文件系统:NetworkFileSystem。一种允许文件通过网络在多台主机上分享的文件系统,可让多机器上的多用户分享文件和存储空间。FastDFS是用c语言编写的一款开源的分布式文件系统,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,功能包括:文件存储、文件同步、文件访问(文件上传、文件
分类:
编程语言 时间:
2018-02-28 11:57:51
阅读次数:
234
新建java文件,存储时Encoding选择了UTF-8, 由于语句中包含中文,javac编译时报错,提示"编码GBK的不可映射字符": 解决办法: 1.使用javac -encoding UTF-8 test.java 编译通过: 2.修改文件encoding编码为 ANSI,编译通过: ...
分类:
编程语言 时间:
2018-02-28 01:06:39
阅读次数:
190
首先说一下MongoDB是什么? MongoDB 是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。 MongoDB 是一个基于分布式文件存储的数据库。 NoSQL (not only sql)是对不同于传统的关系型数据库的数据库管理系统的统称。不需要遵循 ...
分类:
移动开发 时间:
2018-02-27 21:12:45
阅读次数:
271
python是一种解释型语言,它的源代码可以直接运行。由python解释器把源代码解释为中间语言,然后翻译为机器码运行。 1.什么事pickling和unpiickling 我理解为对象的序列化和反序列化,利用pickle可以把python对象转化为二进制字符串(类型为bytes),方便文件存储对象 ...
分类:
编程语言 时间:
2018-02-27 01:07:35
阅读次数:
183
简介 MongoDB 是一个基于分布式 文件存储的NoSQL数据库 由C++语言编写,运行稳定,性能高 旨在为 WEB 应用提供可扩展的高性能数据存储解决方案 查看官方网站 MongoDB特点 模式自由 :可以把不同结构的文档存储在同一个数据库里 面向集合的存储:适合存储 JSON风格文件的形式 完 ...
分类:
数据库 时间:
2018-02-24 14:54:17
阅读次数:
506
简介 MongoDB 是一个基于分布式 文件存储的NoSQL数据库 由C++语言编写,运行稳定,性能高 旨在为 WEB 应用提供可扩展的高性能数据存储解决方案 查看官方网站 MongoDB特点 模式自由 :可以把不同结构的文档存储在同一个数据库里 面向集合的存储:适合存储 JSON风格文件的形式 完 ...
分类:
数据库 时间:
2018-02-24 13:10:52
阅读次数:
201