0.问题 一个同事搭建了两个主机的集群。ceph -s 后,集群一直会出现 recovery 32402/195672 objects degraded objects degraded ?警告。 原因在于,默认3份副本。crush select策略是从host 选择3副本。所以需要修...
分类:
其他好文 时间:
2015-08-26 18:06:57
阅读次数:
284
本人升级的目的是想在CentOS6.2上运行docker和ceph,docker官方建议内核版本在3.8.0及以上,ceph2.6.32后内核就加入了ceph的文件系统模块,但需手动挂上。于是就自己从Linux内核官方网站上下载源码,自己编译。1.准备工作确认内核及版本信息[root@hostname~]#uname-r2.6.32-220..
分类:
其他好文 时间:
2015-08-25 14:31:21
阅读次数:
255
查看ceph集群ceph-s
cluster4ae8b795-a8b2-4904-9573-f6f658838db3
healthHEALTH_OK
monmape1:1monsat{mon0=10.64.0.4:6789/0}
electionepoch1,quorum0mon0
osdmape14:3osds:3up,3in
pgmapv27:64pgs,1pools,0bytesdata,0objects
15459MBused,319GB/334GBavail
64active+cleance..
分类:
其他好文 时间:
2015-08-20 15:34:47
阅读次数:
171
前期准备: 规划:8台机器 IP?????????????? hostname???????? role 192.168.2.20???? mon????????????? mon.mon 192.168.2.21???? osd1???????????? os...
分类:
其他好文 时间:
2015-08-20 10:57:11
阅读次数:
492
摘要
我们开发了 Ceph,一种分布式文件系统。该文件系统提供极佳的性能,可靠性以及扩展性。通过专为不可靠的对象存储设备(Object Storage Device,OSDs)所组成的异构、动态集群而设计的准随机数据分配算法(CRUSH),利用其替代文件分配表,Ceph 将数据与元数据进行了最大程度地分离。通过将数据分布,失效检测恢复指定给运行特殊本地对象文件系统的半自动化的OSDs的方式来使设...
分类:
其他好文 时间:
2015-08-18 19:29:38
阅读次数:
239
Hadoop检查nm是否存活,bin/yarn node list删除目录,hadoop dfs -rm -r /directoryhadoop classpath 可以查看所有的类的路径Hadoop离开安全模式的方法:hadoop dfsadmin -safemode leavewordcount...
分类:
其他好文 时间:
2015-08-15 16:08:38
阅读次数:
224
海量小文件存储(简称LOSF,lots of small files)出现后,就一直是业界的难题,众多博文(如[1])对此问题进行了阐述与分析,许多互联网公司也针对自己的具体场景研发了自己的存储方案(如taobao开源的TFS,facebook自主研发的Haystack),还有一些公司在现有开源.....
分类:
其他好文 时间:
2015-08-15 14:47:08
阅读次数:
300
一、查看Qemu-kvm/usr/libexec/qemu-kvm -drive=?Supported formats: vvfat vpc vmdk vhdx vdi sheepdog rbd raw host_cdrom host_floppy host_device file qed qcow...
分类:
其他好文 时间:
2015-08-13 21:58:32
阅读次数:
526
本文演示了如何使用docker在多个host上构建了一个ceph集群,并对过程做了针对性的说明。...
分类:
其他好文 时间:
2015-08-12 16:57:23
阅读次数:
106
Leader选举 Ceph中的leader选举是一个PaxosLease过程,与BasicPaxos的目的不同。后者用于解决数据一致性问题,而Paxos Lease是为了选举出一个leader承担monmap的同步任务,并负责在该leader离线之后选出新的leader。Ceph集群中只会有一个mo...
分类:
其他好文 时间:
2015-08-11 18:34:04
阅读次数:
296