码迷,mamicode.com
首页 > 其他好文 > 详细

Docker02:Docker核心技术探索(5) 分层联合文件系统

时间:2018-04-19 14:00:38      阅读:142      评论:0      收藏:0      [点我收藏+]

标签:version   很多   ocp   misc   inner   问题   epo   drive   logout   

众多周知,Docker容器的文件系统可以由Linux的各种分层联合文件系统提供底层支撑,这种分层联合文件系统通常在一些处于低层的只读文件系统之上叠加一个处于高层的可读写文件系统。下面结合Docker的镜像和容器的相关概念,对Docker使用的分层文件系统所一个详细的介绍。

1.基本概念。
(1)镜像(Image)
(a)Docker的一个镜像包含一个或多个层(Layer),每个层都有ID和size。
(b)Docker的镜像是只读的,不能写数据。

(2)容器(Container)
(a)当在镜像上添加一个可读写层(容器层)之后,就形成了一个容器。
(b)在容器中可以只读访问镜像中的内容,同时可以读或写容器层的内容。

(3)AUFS
(a)AUFS是 Another Union File System的缩写,又称advanced multi-layered unification filesystem,是一种文件系统。
(b)AUFS的一个典型用途:将一个可读写文件系统附加到一个只读文件系统上形成一个新的文件系统,从而可以对这个只读文件系统进行修改,而修改的内容实际上保存到了可读写文件系统上。

(4)Overlay2
(a)Overlay2是一种类似于AUFS的分层文件系统,其工作方式与AUFS比较类似,但是性能比AUFS一般情况下更好一些。
(b)本人机器上安装的Docker使用的是Overlay2的文件系统,本博客后续将重点介绍Overlay2的工作方式。
(c)Docker官网对于Overlay2的介绍:
https://docs.docker.com/storage/storagedriver/overlayfs-driver/#performance-best-practices


2.Docker镜像和容器相关命令:

(1)docker create
从一个镜像开始,添加一个可读写层,从而创建处一个容器。

(2)docker commit
将容器的可读写层转换为一个只读层,目的是将容器转换为镜像。

(3)docker build
根据Dockerfile文件的FROM指令,反复的执行run,修改和commit,从而逐步建立一个新的镜像,这个新的镜像可能会包含很多的只读层。

(4)docker save
操作镜像,创建一个镜像的压缩包文件,每个层的元数据信息都被保留了,即仍然是分层的。

(5)docker export
操作容器,创建一个容器的压缩包文件,不包含原始层的元素据信息,最后得到的镜像只包含一个扁平的文件系统,即不再是分层的。

(6)docker history
操作镜像。查看镜像的历史镜像信息。


(7)docker load
从一个tar压缩包加载镜像。

(8)docker import
从docker export导出的tar压缩包导入一个镜像,导入后通过docker images可以看到这个镜像。

(9)docker images
查看本机所有的镜像。


(10)docker pull
从Docker Registry下载一个镜像。

(11)docker push
向Docker Registry上传一个镜像。

(12)docker ps
docker ps 查看本机正在运行的docker容器。
docker ps -a 查看本级所有的docker容器,包括正在运行的和已经停止的。


3.分层叠加文件系统(以Overlay为例)
这种分层联合文件系统具有以下特征:

(1)读取文件时先尝试读取高层的文件,在高层找不到时再依次尝试读取低层或更低层的文件。

(2)在各层都不存在某个文件,需要创建新文件时,直接在可读写层创建新文件。

(3)当需要修改某个可读写层已经存在的文件时,直接诶在刻度写层修改该文件。

(4)当需要修改可读写层不存在,而某个只读层存在的文件时,首次修改时先复制一份该文件的副本到可读写层,然后在可读写层修改,这就是所谓的COW(Copy on write,写时复制)。从第二次修改开始,直接在可读写层完成修改。这就是说,修改成功之后,并不会造成原始的只读层的文件的任何变化。 这种修改造成的变化,在最终的分层联合文件系统中是可见的,比如在使用了这种分层联合文件系统的容器中可以看到这种变化。

这种COW的思想对于AUFS和Overlay来说基本上是类似的,COW在操作系统中的其它地方也有体现,比如fork()时的内存管理。

(5)当需要删除可读写层的文件时,直接删除该文件。

(6)当需要删除值存在于只读层的文件时,将会在可读写层的相应位置建立一个特殊的文件作为删除标记,该文件具有c属性。就是说删除操作成功完成之后,并不会造成只读层的文件的任何变化。同样,在最终的分层联合文件系统中可以看到这种删除动作造成的结果,即使用ls再也找不到这个文件。

这种独特的删除文件的方法,在有些时候,称之为WHITEOUT机制。

 

4.实际安装一个基于Overlay的分层联合文件系统。

(1)准备只读层(低层)。

1 [u@11 images]$ pwd
2 /home/u/test/docker/mydocker/data/images
3 [u@11 images]$ ls 
4 00mini  01shell

这里准备了两个目录作为只读层,00mini,是一个空目录。 01shell,包含有若干Linux必备的程序和动态库以及配置文件,是在我们前面的博客中介绍的虚拟系统的基础上添加了若干新的程序和库的结果。

 

  1 [u@11 images]$ tree -L 3 .
  2 .
  3 ├── 00mini
  4 └── 01shell
  5     ├── bin
  6     │   ├── alias
  7     │   ├── bash
  8     │   ├── cat
  9     │   ├── chattr
 10     │   ├── clear
 11     │   ├── cp
 12     │   ├── file
 13     │   ├── grep
 14     │   ├── hostname
 15     │   ├── id
 16     │   ├── ldd
 17     │   ├── login
 18     │   ├── ls
 19     │   ├── mkdir
 20     │   ├── mount
 21     │   ├── nano
 22     │   ├── nslookup
 23     │   ├── passwd
 24     │   ├── ping
 25     │   ├── ps
 26     │   ├── pwd
 27     │   ├── rm
 28     │   ├── rmdir
 29     │   ├── sh
 30     │   ├── strace
 31     │   ├── su
 32     │   ├── umount
 33     │   ├── uname
 34     │   ├── which
 35     │   ├── whoami
 36     │   └── yum
 37     ├── dev
 38     │   ├── null
 39     │   └── pts
 40     ├── etc
 41     │   ├── fstab
 42     │   ├── group
 43     │   ├── host.conf
 44     │   ├── hosts
 45     │   ├── hosts.allow
 46     │   ├── hosts.deny
 47     │   ├── issue
 48     │   ├── issue.net
 49     │   ├── login.defs
 50     │   ├── lsb-release
 51     │   ├── magic
 52     │   ├── mtab
 53     │   ├── nsswitch.conf
 54     │   ├── os-release
 55     │   ├── pam.d
 56     │   ├── passwd
 57     │   ├── passwd-
 58     │   ├── popt.d
 59     │   ├── profile
 60     │   ├── resolv.conf
 61     │   ├── security
 62     │   ├── shadow
 63     │   ├── sudo.conf
 64     │   ├── sudoers
 65     │   ├── sudoers.d
 66     │   ├── sudo-ldap.conf
 67     │   ├── yum
 68     │   ├── yum.conf
 69     │   └── yum.repos.d
 70     ├── home
 71     │   └── coe2coe
 72     ├── lib
 73     │   └── gcc
 74     ├── lib64
 75     │   ├── ld-linux-x86-64.so.2
 76     │   ├── libacl.so.1
 77     │   ├── libattr.so.1
 78     │   ├── libaudit.so.1
 79     │   ├── libbfd-2.25.1-31.base.el7.so
 80     │   ├── libbind9.so.90
 81     │   ├── libbind9.so.90.0.8
 82     │   ├── libblkid.so.1
 83     │   ├── libbz2.so.1
 84     │   ├── libbz2.so.1.0.6
 85     │   ├── libcap-ng.so.0
 86     │   ├── libcap.so.2
 87     │   ├── libcom_err.so
 88     │   ├── libcom_err.so.2
 89     │   ├── libcom_err.so.2.1
 90     │   ├── libcrack.so.2
 91     │   ├── libcrypt-2.17.so
 92     │   ├── libcrypto.so
 93     │   ├── libcrypto.so.10
 94     │   ├── libcrypto.so.1.0.2k
 95     │   ├── libcryptsetup.so.4
 96     │   ├── libcryptsetup.so.4.7.0
 97     │   ├── libcrypt.so
 98     │   ├── libcrypt.so.1
 99     │   ├── libc.so.6
100     │   ├── libcurl.so
101     │   ├── libcurl.so.4
102     │   ├── libcurl.so.4.3.0
103     │   ├── libdb-5.3.so
104     │   ├── libdb-5.so
105     │   ├── libdb.so
106     │   ├── libdbus-1.so.3
107     │   ├── libdbus-1.so.3.7.4
108     │   ├── libdbus-glib-1.so.2
109     │   ├── libdbus-glib-1.so.2.2.2
110     │   ├── libdl.so.2
111     │   ├── libdns.so.100 -> libdns.so.100.1.1
112     │   ├── libdns.so.100.1.1
113     │   ├── libdw.so.1
114     │   ├── libelf.so.1
115     │   ├── libffi.so.6
116     │   ├── libfreebl3.so
117     │   ├── libfreeblpriv3.so
118     │   ├── libgcc_s.so.1
119     │   ├── libgcrypt.so.11
120     │   ├── libGeoIP.so.1
121     │   ├── libGeoIP.so.1.5.0
122     │   ├── libGeoIPUpdate.so.0
123     │   ├── libGeoIPUpdate.so.0.0.0
124     │   ├── libglib-2.0.so.0
125     │   ├── libglib-2.0.so.0.5000.3
126     │   ├── libgmodule-2.0.so.0
127     │   ├── libgmp.so.10 -> libgmp.so.10.2.0
128     │   ├── libgmp.so.10.2.0
129     │   ├── libgmpxx.so.4 -> libgmpxx.so.4.4.0
130     │   ├── libgmpxx.so.4.4.0
131     │   ├── libgobject-2.0.so.0
132     │   ├── libgpg-error.so.0
133     │   ├── libgpm.so.2 -> libgpm.so.2.1.0
134     │   ├── libgpm.so.2.1.0
135     │   ├── libgssapi_krb5.so
136     │   ├── libgssapi_krb5.so.2
137     │   ├── libgssapi_krb5.so.2.2
138     │   ├── libidn.so.11
139     │   ├── libidn.so.11.6.11
140     │   ├── libip4tc.so.0
141     │   ├── libip4tc.so.0.1.0
142     │   ├── libip6tc.so.0
143     │   ├── libip6tc.so.0.1.0
144     │   ├── libisccc.so.90
145     │   ├── libisccc.so.90.0.4
146     │   ├── libisccfg.so.90
147     │   ├── libisccfg.so.90.0.7
148     │   ├── libisc.so.95
149     │   ├── libisc.so.95.2.1
150     │   ├── libk5crypto.so
151     │   ├── libk5crypto.so.3
152     │   ├── libk5crypto.so.3.1
153     │   ├── libkeyutils.so
154     │   ├── libkeyutils.so.1
155     │   ├── libkeyutils.so.1.5
156     │   ├── libkrb5.so
157     │   ├── libkrb5.so.3
158     │   ├── libkrb5.so.3.3
159     │   ├── libkrb5support.so
160     │   ├── libkrb5support.so.0
161     │   ├── libkrb5support.so.0.1
162     │   ├── liblua-5.1.so
163     │   ├── liblwres.so.90
164     │   ├── liblwres.so.90.0.5
165     │   ├── liblzma.so.5
166     │   ├── liblzma.so.5.2.2
167     │   ├── libmount.so.1
168     │   ├── libmpc.so.3
169     │   ├── libmpc.so.3.0.0
170     │   ├── libmpfr.so.4
171     │   ├── libmpfr.so.4.1.1
172     │   ├── libm.so.6
173     │   ├── libncurses.so.5
174     │   ├── libncursesw.so.5
175     │   ├── libnsl.so.1
176     │   ├── libnspr4.so
177     │   ├── libnss3.so
178     │   ├── libnss_dns-2.17.so
179     │   ├── libnss_dns.so
180     │   ├── libnss_dns.so.2
181     │   ├── libnss_files.so.2
182     │   ├── libnssutil3.so
183     │   ├── libopcodes-2.25.1-31.base.el7.so
184     │   ├── libpam_misc.so.0
185     │   ├── libpam.so.0
186     │   ├── libpcre.so.1
187     │   ├── libplc4.so
188     │   ├── libplds4.so
189     │   ├── libpopt.so.0
190     │   ├── libpopt.so.0.0.0
191     │   ├── libprocps.so.4
192     │   ├── libpthread.so.0
193     │   ├── libpwquality.so.1
194     │   ├── libpython2.7.so
195     │   ├── libpython2.7.so.1.0
196     │   ├── libresolv-2.17.so
197     │   ├── libresolv.so
198     │   ├── libresolv.so.2
199     │   ├── librpmbuild.so.3
200     │   ├── librpmbuild.so.3.2.2
201     │   ├── librpmio.so.3
202     │   ├── librpmio.so.3.2.2
203     │   ├── librpmsign.so.1
204     │   ├── librpmsign.so.1.2.2
205     │   ├── librpm.so.3
206     │   ├── librpm.so.3.2.2
207     │   ├── librt-2.17.so
208     │   ├── librt.so
209     │   ├── librt.so.1
210     │   ├── libselinux.so
211     │   ├── libselinux.so.1
212     │   ├── libsemanage.so.1
213     │   ├── libsepol.so.1
214     │   ├── libsoftokn3.chk
215     │   ├── libsoftokn3.so
216     │   ├── libsqlite3.so.0
217     │   ├── libsqlite3.so.0.8.6
218     │   ├── libssl3.so
219     │   ├── libssl.so
220     │   ├── libssl.so.10
221     │   ├── libssl.so.1.0.2k
222     │   ├── libsystemd.so.0
223     │   ├── libtinfo.so.5
224     │   ├── libuser.so.1
225     │   ├── libustr-1.0.so.1
226     │   ├── libutil.so
227     │   ├── libutil.so.1
228     │   ├── libuuid.so.1
229     │   ├── libxml2.so.2
230     │   ├── libxml2.so.2.9.1
231     │   ├── libxtables.so.10
232     │   ├── libxtables.so.10.0.0
233     │   ├── libz.so.1
234     │   └── python2.7
235     ├── opt
236     │   ├── install
237     │   └── test
238     ├── proc
239     ├── root
240     ├── sbin
241     │   ├── groupadd
242     │   ├── ifconfig
243     │   ├── ip
244     │   ├── pivot_root
245     │   ├── route
246     │   └── useradd
247     ├── tmp
248     ├── usr
249     │   ├── bin
250     │   ├── include
251     │   ├── lib
252     │   ├── lib64
253     │   ├── libexec
254     │   ├── local
255     │   ├── sbin
256     │   └── share
257     └── var
258         ├── cache
259         ├── lib
260         ├── log
261         └── run
262 
263 39 directories, 220 files

上面的列表中,为了节省篇幅,只列举了3层目录结构。

 

(2)准备其它必备的目录。

这里给出一个所需目录结构的模板。

rwlayer目录作为可读写层,初始状态为一个空目录;

tmp目录下的子目录将会作为Overlay分层文件系统的中间层的mount安装目录,;

workdir将会是Overlay分层文件系统安装所需要的workdir目录,设置这个目录是因为需要将00mini和01shell作为一个联合的只读层,安装在layer1目录下, 再将layer1作为新的只读层,将rwlayer作为可读写层,安装在merged目录下,这样需要mount两次overlay文件系统。在同一个进程中,overlay文件系统默认支持2级递归安装,再多一级将会报错,可通过修改overlay源代码的宏定义后重新编译来支持更多层级。

最后merged目录将会是最终的联合文件系统所在目录,也是最终的一个mount安装目录,为各个层的文件提供一个统一的视角。

 

 1  tree .
 2 .
 3 ├── merged
 4 ├── rwlayer
 5 ├── tmp
 6 │   ├── layer1
 7 │   └── layer2
 8 └── workdir
 9     └── work [error opening dir]
10 
11 7 directories, 0 files

 

(3)执行安装工作。

直接通过mount命令完成。以下命令来自我们创建的一个shell脚本文件filesystem.sh, 完整的Shell脚本将在稍后给出。

1 mount -t overlay overlay -o lowerdir=${IMAGE_DIR}01shell:${IMAGE_DIR}00mini  ${CONTAINER_DIR}tmp/layer1
2 mount -t overlay overlay -o lowerdir=${CONTAINER_DIR}tmp/layer1,upperdir=${CONTAINER_DIR}rwlayer,workdir=${CONTAINER_DIR}workdir  ${CONTAINER_DIR}merged

 

我们前面已经知道在安装overlay文件系统之前,merged目录下什么也没有。现在我们来看以下merged目录下有什么。

  1 [u@11 firstcontainer]$ tree -L 3 .
  2 .
  3 ├── merged
  4 │   ├── bin
  5 │   │   ├── alias
  6 │   │   ├── bash
  7 │   │   ├── cat
  8 │   │   ├── chattr
  9 │   │   ├── clear
 10 │   │   ├── cp
 11 │   │   ├── file
 12 │   │   ├── grep
 13 │   │   ├── hostname
 14 │   │   ├── id
 15 │   │   ├── ldd
 16 │   │   ├── login
 17 │   │   ├── ls
 18 │   │   ├── mkdir
 19 │   │   ├── mount
 20 │   │   ├── nano
 21 │   │   ├── nslookup
 22 │   │   ├── passwd
 23 │   │   ├── ping
 24 │   │   ├── ps
 25 │   │   ├── pwd
 26 │   │   ├── rm
 27 │   │   ├── rmdir
 28 │   │   ├── sh
 29 │   │   ├── strace
 30 │   │   ├── su
 31 │   │   ├── umount
 32 │   │   ├── uname
 33 │   │   ├── which
 34 │   │   ├── whoami
 35 │   │   └── yum
 36 │   ├── dev
 37 │   │   ├── null
 38 │   │   └── pts
 39 │   ├── etc
 40 │   │   ├── fstab
 41 │   │   ├── group
 42 │   │   ├── host.conf
 43 │   │   ├── hosts
 44 │   │   ├── hosts.allow
 45 │   │   ├── hosts.deny
 46 │   │   ├── issue
 47 │   │   ├── issue.net
 48 │   │   ├── login.defs
 49 │   │   ├── lsb-release
 50 │   │   ├── magic
 51 │   │   ├── mtab
 52 │   │   ├── nsswitch.conf
 53 │   │   ├── os-release
 54 │   │   ├── pam.d
 55 │   │   ├── passwd
 56 │   │   ├── passwd-
 57 │   │   ├── popt.d
 58 │   │   ├── profile
 59 │   │   ├── resolv.conf
 60 │   │   ├── security
 61 │   │   ├── shadow
 62 │   │   ├── sudo.conf
 63 │   │   ├── sudoers
 64 │   │   ├── sudoers.d
 65 │   │   ├── sudo-ldap.conf
 66 │   │   ├── yum
 67 │   │   ├── yum.conf
 68 │   │   └── yum.repos.d
 69 │   ├── home
 70 │   │   └── coe2coe
 71 │   ├── lib
 72 │   │   └── gcc
 73 │   ├── lib64
 74 │   │   ├── ld-linux-x86-64.so.2
 75 │   │   ├── libacl.so.1
 76 │   │   ├── libattr.so.1
 77 │   │   ├── libaudit.so.1
 78 │   │   ├── libbfd-2.25.1-31.base.el7.so
 79 │   │   ├── libbind9.so.90
 80 │   │   ├── libbind9.so.90.0.8
 81 │   │   ├── libblkid.so.1
 82 │   │   ├── libbz2.so.1
 83 │   │   ├── libbz2.so.1.0.6
 84 │   │   ├── libcap-ng.so.0
 85 │   │   ├── libcap.so.2
 86 │   │   ├── libcom_err.so
 87 │   │   ├── libcom_err.so.2
 88 │   │   ├── libcom_err.so.2.1
 89 │   │   ├── libcrack.so.2
 90 │   │   ├── libcrypt-2.17.so
 91 │   │   ├── libcrypto.so
 92 │   │   ├── libcrypto.so.10
 93 │   │   ├── libcrypto.so.1.0.2k
 94 │   │   ├── libcryptsetup.so.4
 95 │   │   ├── libcryptsetup.so.4.7.0
 96 │   │   ├── libcrypt.so
 97 │   │   ├── libcrypt.so.1
 98 │   │   ├── libc.so.6
 99 │   │   ├── libcurl.so
100 │   │   ├── libcurl.so.4
101 │   │   ├── libcurl.so.4.3.0
102 │   │   ├── libdb-5.3.so
103 │   │   ├── libdb-5.so
104 │   │   ├── libdb.so
105 │   │   ├── libdbus-1.so.3
106 │   │   ├── libdbus-1.so.3.7.4
107 │   │   ├── libdbus-glib-1.so.2
108 │   │   ├── libdbus-glib-1.so.2.2.2
109 │   │   ├── libdl.so.2
110 │   │   ├── libdns.so.100 -> libdns.so.100.1.1
111 │   │   ├── libdns.so.100.1.1
112 │   │   ├── libdw.so.1
113 │   │   ├── libelf.so.1
114 │   │   ├── libffi.so.6
115 │   │   ├── libfreebl3.so
116 │   │   ├── libfreeblpriv3.so
117 │   │   ├── libgcc_s.so.1
118 │   │   ├── libgcrypt.so.11
119 │   │   ├── libGeoIP.so.1
120 │   │   ├── libGeoIP.so.1.5.0
121 │   │   ├── libGeoIPUpdate.so.0
122 │   │   ├── libGeoIPUpdate.so.0.0.0
123 │   │   ├── libglib-2.0.so.0
124 │   │   ├── libglib-2.0.so.0.5000.3
125 │   │   ├── libgmodule-2.0.so.0
126 │   │   ├── libgmp.so.10 -> libgmp.so.10.2.0
127 │   │   ├── libgmp.so.10.2.0
128 │   │   ├── libgmpxx.so.4 -> libgmpxx.so.4.4.0
129 │   │   ├── libgmpxx.so.4.4.0
130 │   │   ├── libgobject-2.0.so.0
131 │   │   ├── libgpg-error.so.0
132 │   │   ├── libgpm.so.2 -> libgpm.so.2.1.0
133 │   │   ├── libgpm.so.2.1.0
134 │   │   ├── libgssapi_krb5.so
135 │   │   ├── libgssapi_krb5.so.2
136 │   │   ├── libgssapi_krb5.so.2.2
137 │   │   ├── libidn.so.11
138 │   │   ├── libidn.so.11.6.11
139 │   │   ├── libip4tc.so.0
140 │   │   ├── libip4tc.so.0.1.0
141 │   │   ├── libip6tc.so.0
142 │   │   ├── libip6tc.so.0.1.0
143 │   │   ├── libisccc.so.90
144 │   │   ├── libisccc.so.90.0.4
145 │   │   ├── libisccfg.so.90
146 │   │   ├── libisccfg.so.90.0.7
147 │   │   ├── libisc.so.95
148 │   │   ├── libisc.so.95.2.1
149 │   │   ├── libk5crypto.so
150 │   │   ├── libk5crypto.so.3
151 │   │   ├── libk5crypto.so.3.1
152 │   │   ├── libkeyutils.so
153 │   │   ├── libkeyutils.so.1
154 │   │   ├── libkeyutils.so.1.5
155 │   │   ├── libkrb5.so
156 │   │   ├── libkrb5.so.3
157 │   │   ├── libkrb5.so.3.3
158 │   │   ├── libkrb5support.so
159 │   │   ├── libkrb5support.so.0
160 │   │   ├── libkrb5support.so.0.1
161 │   │   ├── liblua-5.1.so
162 │   │   ├── liblwres.so.90
163 │   │   ├── liblwres.so.90.0.5
164 │   │   ├── liblzma.so.5
165 │   │   ├── liblzma.so.5.2.2
166 │   │   ├── libmount.so.1
167 │   │   ├── libmpc.so.3
168 │   │   ├── libmpc.so.3.0.0
169 │   │   ├── libmpfr.so.4
170 │   │   ├── libmpfr.so.4.1.1
171 │   │   ├── libm.so.6
172 │   │   ├── libncurses.so.5
173 │   │   ├── libncursesw.so.5
174 │   │   ├── libnsl.so.1
175 │   │   ├── libnspr4.so
176 │   │   ├── libnss3.so
177 │   │   ├── libnss_dns-2.17.so
178 │   │   ├── libnss_dns.so
179 │   │   ├── libnss_dns.so.2
180 │   │   ├── libnss_files.so.2
181 │   │   ├── libnssutil3.so
182 │   │   ├── libopcodes-2.25.1-31.base.el7.so
183 │   │   ├── libpam_misc.so.0
184 │   │   ├── libpam.so.0
185 │   │   ├── libpcre.so.1
186 │   │   ├── libplc4.so
187 │   │   ├── libplds4.so
188 │   │   ├── libpopt.so.0
189 │   │   ├── libpopt.so.0.0.0
190 │   │   ├── libprocps.so.4
191 │   │   ├── libpthread.so.0
192 │   │   ├── libpwquality.so.1
193 │   │   ├── libpython2.7.so
194 │   │   ├── libpython2.7.so.1.0
195 │   │   ├── libresolv-2.17.so
196 │   │   ├── libresolv.so
197 │   │   ├── libresolv.so.2
198 │   │   ├── librpmbuild.so.3
199 │   │   ├── librpmbuild.so.3.2.2
200 │   │   ├── librpmio.so.3
201 │   │   ├── librpmio.so.3.2.2
202 │   │   ├── librpmsign.so.1
203 │   │   ├── librpmsign.so.1.2.2
204 │   │   ├── librpm.so.3
205 │   │   ├── librpm.so.3.2.2
206 │   │   ├── librt-2.17.so
207 │   │   ├── librt.so
208 │   │   ├── librt.so.1
209 │   │   ├── libselinux.so
210 │   │   ├── libselinux.so.1
211 │   │   ├── libsemanage.so.1
212 │   │   ├── libsepol.so.1
213 │   │   ├── libsoftokn3.chk
214 │   │   ├── libsoftokn3.so
215 │   │   ├── libsqlite3.so.0
216 │   │   ├── libsqlite3.so.0.8.6
217 │   │   ├── libssl3.so
218 │   │   ├── libssl.so
219 │   │   ├── libssl.so.10
220 │   │   ├── libssl.so.1.0.2k
221 │   │   ├── libsystemd.so.0
222 │   │   ├── libtinfo.so.5
223 │   │   ├── libuser.so.1
224 │   │   ├── libustr-1.0.so.1
225 │   │   ├── libutil.so
226 │   │   ├── libutil.so.1
227 │   │   ├── libuuid.so.1
228 │   │   ├── libxml2.so.2
229 │   │   ├── libxml2.so.2.9.1
230 │   │   ├── libxtables.so.10
231 │   │   ├── libxtables.so.10.0.0
232 │   │   ├── libz.so.1
233 │   │   └── python2.7
234 │   ├── opt
235 │   │   ├── install
236 │   │   └── test
237 │   ├── proc
238 │   │   ├── 1
239 │   │   ├── acpi
240 │   │   ├── buddyinfo
241 │   │   ├── bus
242 │   │   ├── cgroups
243 │   │   ├── cmdline
244 │   │   ├── consoles
245 │   │   ├── cpuinfo
246 │   │   ├── crypto
247 │   │   ├── devices
248 │   │   ├── diskstats
249 │   │   ├── dma
250 │   │   ├── driver
251 │   │   ├── execdomains
252 │   │   ├── fb
253 │   │   ├── filesystems
254 │   │   ├── fs
255 │   │   ├── interrupts
256 │   │   ├── iomem
257 │   │   ├── ioports
258 │   │   ├── irq
259 │   │   ├── kallsyms
260 │   │   ├── kcore
261 │   │   ├── keys
262 │   │   ├── key-users
263 │   │   ├── kmsg
264 │   │   ├── kpagecount
265 │   │   ├── kpageflags
266 │   │   ├── loadavg
267 │   │   ├── locks
268 │   │   ├── mdstat
269 │   │   ├── meminfo
270 │   │   ├── misc
271 │   │   ├── modules
272 │   │   ├── mounts -> self/mounts
273 │   │   ├── mpt
274 │   │   ├── mtrr
275 │   │   ├── net -> self/net
276 │   │   ├── pagetypeinfo
277 │   │   ├── partitions
278 │   │   ├── sched_debug
279 │   │   ├── schedstat
280 │   │   ├── scsi
281 │   │   ├── self -> [Error\ reading\ symbolic\ link\ information]
282 │   │   ├── slabinfo
283 │   │   ├── softirqs
284 │   │   ├── stat
285 │   │   ├── swaps
286 │   │   ├── sys
287 │   │   ├── sysrq-trigger
288 │   │   ├── sysvipc
289 │   │   ├── timer_list
290 │   │   ├── timer_stats
291 │   │   ├── tty
292 │   │   ├── uptime
293 │   │   ├── version
294 │   │   ├── vmallocinfo
295 │   │   ├── vmstat
296 │   │   └── zoneinfo
297 │   ├── root
298 │   ├── sbin
299 │   │   ├── groupadd
300 │   │   ├── ifconfig
301 │   │   ├── ip
302 │   │   ├── pivot_root
303 │   │   ├── route
304 │   │   └── useradd
305 │   ├── tmp
306 │   ├── usr
307 │   │   ├── bin
308 │   │   ├── include
309 │   │   ├── lib
310 │   │   ├── lib64
311 │   │   ├── libexec
312 │   │   ├── local
313 │   │   ├── sbin
314 │   │   └── share
315 │   └── var
316 │       ├── cache
317 │       ├── lib
318 │       ├── log
319 │       └── run
320 ├── rwlayer
321 ├── tmp
322 │   ├── layer1
323 │   │   ├── bin
324 │   │   ├── dev
325 │   │   ├── etc
326 │   │   ├── home
327 │   │   ├── lib
328 │   │   ├── lib64
329 │   │   ├── opt
330 │   │   ├── proc
331 │   │   ├── root
332 │   │   ├── sbin
333 │   │   ├── tmp
334 │   │   ├── usr
335 │   │   └── var
336 │   └── layer2
337 └── workdir
338     └── work [error opening dir]
339 
340 68 directories, 268 files

 

可以看到,由于只读层中的00mini和可读写层中的rwlayer目录均没有任何内容,在安装之后,merged目录下的内容和只读层中的01shell目录中的内容完全一致。到目前为止的所有操作都是在宿主系统中完成的。

对于安装之后的分层文件系统的各种文件的增删改查操作在我们的模拟docker容器环境mydocker下进行。

 

5.在overlay分层联合文件系统下的文件的增删改查操作。

本部分描述的内容中,shell提示符包含类似11:58:37这种时间格式的部分,表示在mydocker的容器的虚拟系统中进行的,即在overlay分层联合文件系统的最终统一视图下进行操作,其它表示在宿主系统中进行。

(1)新建立文件。

新创建一个各层都不存在的文件test.txt。

1 11:58:37 root@firstcontainer /#echo  http://www.cnblogs.com/coe2coe/ > test.txt
2 11:59:18 root@firstcontainer /#cat test.txt
3 http://www.cnblogs.com/coe2coe/

我们可以在可读写层rwlayer目录中找到这个文件。

1 [u@11 rwlayer]$ ls
2 test.txt
3 [u@11 rwlayer]$ cat test.txt
4 http://www.cnblogs.com/coe2coe/

(2)修改可读写层的文件。

修改位于可读写层的文件test.txt的内容。

1 11:59:21 root@firstcontainer /#echo hello mydocker! >> test.txt
2 12:05:24 root@firstcontainer /#cat test.txt
3 http://www.cnblogs.com/coe2coe/
4 hello mydocker!

在可读写层目录中查看这个文件:

1 [u@11 rwlayer]$ cat test.txt
2 http://www.cnblogs.com/coe2coe/
3 hello mydocker!

在我们的只读层中00mini和01shell中是找不到这个文件的。

1 [u@11 images]$ ls
2 00mini  01shell
3 [u@11 images]$ ls 00mini
4 [u@11 images]$ ls 01shell
5 bin  dev  etc  home  lib  lib64  opt  proc  root  sbin  tmp  usr  var

 

(3)修改只读层的文件。

我们在容器中修改一下只读层01shell中的etc/profile文件。

 1 12:09:51 root@firstcontainer /#cat /etc/profile
 2 ##################################################################
 3 #   FileName    :profile
 4 #   Author      : coe2coe@qq.com
 5 #   Created     :2018-04-16
 6 #   Description :http://www.cnblogs.com/coe2coe/
 7 #################################################################
 8 
 9 
10 #!/bin/bash
11 
12 echo -e "Starting my containner ....."
13 
14 export PATH=/bin:/usr/bin:/usr/local/bin:/sbin:/usr/sbin
15 export TERM=linux
16 
17 
18 export HOSTNAME=$(hostname)
19 export USER=$(whoami)
20 
21 
22 export PS1=\t \u@\h \w\$
23 
24 
25 
26 echo -e "welcome to http://www.cnblogs.com/coe2coe/"
27 echo -e "Welcome to my containner!"

只是增加了第26行的内容。

现在来查看以下Overlay有没有使用COW机制复制一份只读层的这个文件到可读写层中来。

先看可读写层:

 1 [u@11 rwlayer]$ ls
 2 etc  test.txt
 3 [u@11 rwlayer]$ cat etc/profile
 4 ##################################################################
 5 #   FileName    :profile
 6 #   Author      : coe2coe@qq.com
 7 #   Created     :2018-04-16
 8 #   Description :http://www.cnblogs.com/coe2coe/
 9 #################################################################
10 
11 
12 #!/bin/bash
13 
14 echo -e "Starting my containner ....."
15 
16 export PATH=/bin:/usr/bin:/usr/local/bin:/sbin:/usr/sbin
17 export TERM=linux
18 
19 
20 export HOSTNAME=$(hostname)
21 export USER=$(whoami)
22 
23 
24 export PS1=\t \u@\h \w\$
25 
26 
27 
28 echo -e "welcome to http://www.cnblogs.com/coe2coe/"
29 echo -e "Welcome to my containner!"

发现在可读写层rwlayer中,profiel已经复制过来了,内容是修改后的内容。

再看只读层01shell,仍然是修改前的原始内容:

 1 [u@11 images]$ cat 01shell/etc/profile
 2 ##################################################################
 3 #   FileName    :profile
 4 #   Author      : coe2coe@qq.com
 5 #   Created     :2018-04-16
 6 #   Description :http://www.cnblogs.com/coe2coe/
 7 #################################################################
 8 
 9 
10 #!/bin/bash
11 
12 echo -e "Starting my containner ....."
13 
14 export PATH=/bin:/usr/bin:/usr/local/bin:/sbin:/usr/sbin
15 export TERM=linux
16 
17 
18 export HOSTNAME=$(hostname)
19 export USER=$(whoami)
20 
21 
22 export PS1=\t \u@\h \w\$
23 
24 
25 
26 
27 echo -e "Welcome to my containner!"

 

(3)高层隐藏低层的同名文件。

可读写层位于高层,只读层位于低层,高层文件隐藏低层的同名文件。同名是在联合后的文件系统中,绝对路径完全相同的文件。‘

前面在容器中修改了01shell只读层etc/profile文件之后,在可读写层rwlayer中使用COW机制产生了同名文件etc/profile,这两个文件在联合后的文件系统,即容器内可见的根文件系统中,绝对路径都是/etc/profile,因此是同名的。这样就不难理解修改后,在容器中通过cat看到的/etc/profile的内容,和在宿主系统中看到的可读写层的内容是一致的。

 

(4)删除只读层的文件。

在容器中删除只读层的文件,将会在可读写层生成一个特殊的标记文件,带有c属性。这样在容器内该文件将不可见。我们在容器中删除/root目录下的.bash_profile文件。

 1 12:20:11 root@firstcontainer ~#ls -la
 2 total 20
 3 drwxr-xr-x. 2 root root    47 Apr 18 18:46 .
 4 drwxr-xr-x. 1 root root    33 Apr 19 11:59 ..
 5 -rw-------. 1 root root 12774 Apr 19 00:40 .bash_history
 6 -rw-r--r--. 1 root root   332 Apr 19 00:40 .bash_logout
 7 12:20:12 root@firstcontainer ~#rm .bash_history
 8 12:20:27 root@firstcontainer ~#ls -la
 9 total 4
10 drwxr-xr-x. 1 root root  27 Apr 19 12:20 .
11 drwxr-xr-x. 1 root root  45 Apr 19 11:59 ..
12 -rw-r--r--. 1 root root 332 Apr 19 00:40 .bash_logout

在宿主系统(容器外部)查看只读层,该文件依然存在。

1 [u@11 images]$ ls 01shell/root/ -la
2 总用量 20
3 drwxr-xr-x.  2 root root    47 4月  19 02:46 .
4 drwxr-xr-x. 15 root root   155 4月  19 08:40 ..
5 -rw-------.  1 root root 12774 4月  19 08:40 .bash_history
6 -rw-r--r--.  1 root root   332 4月  19 08:40 .bash_logout

再查看可读写层,”创建“了一个新文件,带有c属性。

1 [u@11 rwlayer]$ ls -la root/
2 总用量 0
3 drwxr-xr-x. 2 root root   27 4月  19 20:20 .
4 drwxr-xr-x. 4 root root   45 4月  19 19:59 ..
5 c---------. 1 root root 0, 0 4月  19 20:20 .bash_history

这种情况下,在可读写层存在该文件,在只读层也存在该文件,但是在统一的联合文件系统的视图下,就是看不到该文件,从而实现了删除只读层文件的功能。

 

 

 

 

 

总结:

(1)使用overlay分层联合文件系统,有效的实现了将宿主系统下的多个目录联合组成容器中的根文件系统目录。

(2)overlay使用的时候发现一个问题,在已经mount成功之后,有时候在宿主系统中的只读层的目录中增加新的文件,在容器中”勉强“可以看到这个新文件,但是文件属性不正确,甚至无法正常读取该文件内容;有时候又可以正常看到文件属性和读取到正确的文件内容。

 

截止今天,我们已经探索了docker所使用的Linux命名空间隔离机制(主要是进程隔离,文件系统隔离,网络环境隔离、UTS主机名隔离),以及overlay分层联合文件系统;而docker的背后,当然还有更多的技术秘密需要我们做进一步的探索。

 

Docker02:Docker核心技术探索(5) 分层联合文件系统

标签:version   很多   ocp   misc   inner   问题   epo   drive   logout   

原文地址:https://www.cnblogs.com/coe2coe/p/8881742.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!