AUFS是一種Union File System,所謂UnionFS就是把不同物理位置的目錄合并mount到同一個目錄中。UnionFS的一個最主要的應用是,把一張CD/DVD和一個硬盤目錄給聯合 mount在一起,然后,你就可以對這個只讀的CD/DVD上的文件進行修改(當然,修改的文件存于硬盤上的目錄里)。
AUFS又叫Another UnionFS,后來叫Alternative UnionFS,后來可能覺得不夠霸氣,叫成Advance UnionFS。是個叫Junjiro Okajima(岡島順治郎)在2006年開發的,AUFS完全重寫了早期的UnionFS 1.x,其主要目的是為了可靠性和性能,并且引入了一些新的功能,比如可寫分支的負載均衡。AUFS在使用上全兼容UnionFS,而且比之前的UnionFS在穩定性和性能上都要好很多,后來的UnionFS 2.x開始抄AUFS中的功能。但是他居然沒有進到Linux主干里,就是因為Linus不讓,基本上是因為代碼量比較多,而且寫得爛(相對于只有3000行的union mount和10000行的UnionFS,以及其它平均下來只有6000行代碼左右的VFS,AUFS居然有30000行代碼),所以,岡島不斷地改進代碼質量,不斷地提交,不斷地被Linus拒掉,所以,到今天AUFS都還進不了Linux主干(今天你可以看到AUFS的代碼其實還好了,比起OpenSSL好N倍,要么就是Linus對代碼的質量要求非常高,要么就是Linus就是不喜歡AUFS)。
不過,好在有很多發行版都用了AUFS,比如:Ubuntu 10.04,Debian6.0, Gentoo Live CD支持AUFS,所以,也OK了。
好了,扯完這些閑話,我們還是看一個示例吧(環境:Ubuntu 14.04)
首先,我們建上兩個目錄(水果和蔬菜),并在這兩個目錄中放上一些文件,水果中有蘋果和蕃茄,蔬菜有胡蘿卜和蕃茄。
然后,我們輸入以下命令:
我們可以看到在./mnt目錄下有三個文件,蘋果apple、胡蘿卜carrots和蕃茄tomato。水果和蔬菜的目錄被union到了./mnt目錄下了。
我們來修改一下其中的文件內容:
上面的示例,我們可以看到./mnt/apple的內容改了,./fruits/apple的內容也改了。
上面的示例,我們可以看到,我們修改了./mnt/carrots的文件內容,./vegetables/carrots并沒有變化,反而是./fruits/carrots的目錄中出現了carrots文件,其內容是我們在./mnt/carrots里的內容。
也就是說,我們在mount aufs命令中,我們沒有指它vegetables和fruits的目錄權限,默認上來說,命令行上第一個(最左邊)的目錄是可讀可寫的,后面的全都是只讀的。(一般來說,最前面的目錄應該是可寫的,而后面的都應該是只讀的)
所以,如果我們像下面這樣指定權限來mount aufs,你就會發現有不一樣的效果(記得先把上面./fruits/carrots的文件刪除了):
現在,在這情況下,如果我們要修改./mnt/tomato這個文件,那么究竟是哪個文件會被改寫?
可見,如果有重復的文件名,在mount命令行上,越往前的就優先級越高。
你可以用這個例子做一些各種各樣的試驗,我這里主要是給大家一個感性認識,就不展開試驗下去了。
那么,這種UnionFS有什么用?
歷史上,有一個叫Knoppix的Linux發行版,其主要用于Linux演示、光盤教學、系統急救,以及商業產品的演示,不需要硬盤安裝,直接把CD/DVD上的image運行在一個可寫的存儲設備上(比如一個U盤上),其實,也就是把CD/DVD這個文件系統和USB這個可寫的系統給聯合mount起來,這樣你對CD/DVD上的image做的任何改動都會在被應用在U盤上,于是乎,你可以對CD/DVD上的內容進行任意的修改,因為改動都在U盤上,所以你改不壞原來的東西。
我們可以再發揮一下想像力,你也可以把一個目錄,比如你的源代碼,作為一個只讀的template,和另一個你的working directory給union在一起,然后你就可以做各種修改而不用害怕會把源代碼改壞了。有點像一個ad hoc snapshot。
Docker把UnionFS的想像力發揮到了容器的鏡像。你是否還記得我在介紹Linux Namespace上篇中用mount namespace和chroot山寨了一鏡像。現在當你看過了這個UnionFS的技術后,你是不是就明白了,你完全可以用UnionFS這樣的技術做出分層的鏡像來。
下圖來自Docker的官方文檔Layer,其很好的展示了Docker用UnionFS搭建的分層鏡像。
關于docker的分層鏡像,除了aufs,docker還支持btrfs, devicemapper和vfs,你可以使用 -s 或 –storage-driver= 選項來指定相關的鏡像存儲。在Ubuntu 14.04下,docker默認Ubuntu的 aufs(在CentOS7下,用的是devicemapper,關于devicemapper,我會以以后的文章中講解)你可以在下面的目錄中查看相關的每個層的鏡像:
在docker執行起來后(比如:docker run -it ubuntu /bin/bash ),你可以從/sys/fs/aufs/si_[id]目錄下查看aufs的mount的情況,下面是個示例:
你會看到只有最頂上的層(branch)是rw權限,其它的都是ro+wh權限只讀的。
關于docker的aufs的配置,你可以在/var/lib/docker/repositories-aufs這個文件中看到。
AUFS的一些特性
AUFS有所有Union FS的特性,把多個目錄,合并成同一個目錄,并可以為每個需要合并的目錄指定相應的權限,實時的添加、刪除、修改已經被mount好的目錄。而且,他還能在多個可寫的branch/dir間進行負載均衡。
上面的例子,我們已經看到AUFS的mount的示例了。下面我們來看一看被union的目錄(分支)的相關權限:
rw表示可寫可讀read-write。
ro表示read-only,如果你不指權限,那么除了第一個外ro是默認值,對于ro分支,其永遠不會收到寫操作,也不會收到查找whiteout的操作。
rr表示real-read-only,與read-only不同的是,rr標記的是天生就是只讀的分支,這樣,AUFS可以提高性能,比如不再設置inotify來檢查文件變動通知。
權限中,我們看到了一個術語:whiteout,下面我來解釋一下這個術語。
一般來說ro的分支都會有wh的屬性,比如 “[dir]=ro+wh”。所謂whiteout的意思,如果在union中刪除的某個文件,實際上是位于一個readonly的分支(目錄)上,那么,在mount的union這個目錄中你將看不到這個文件,但是read-only這個層上我們無法做任何的修改,所以,我們就需要對這個readonly目錄里的文件作whiteout。AUFS的whiteout的實現是通過在上層的可寫的目錄下建立對應的whiteout隱藏文件來實現的。
看個例子:
假設我們有三個目錄和文件如下所示(test是個空目錄):
我們如下mount:
現在我們在權限為rw的test目錄下建個whiteout的隱藏文件.wh.apple,你就會發現./mnt/apple這個文件就消失了:
上面這個操作和 rm ./mnt/apple是一樣的。
相關術語
?Branch– 就是各個要被union起來的目錄(就是我在上面使用的dirs的命令行參數)
?Branch根據被union的順序形成一個stack,一般來說最上面的是可寫的,下面的都是只讀的。
?Branch的stack可以在被mount后進行修改,比如:修改順序,加入新的branch,或是刪除其中的branch,或是直接修改branch的權限
?Whiteout和Opaque
?如果UnionFS中的某個目錄被刪除了,那么就應該不可見了,就算是在底層的branch中還有這個目錄,那也應該不可見了。
?Whiteout就是某個上層目錄覆蓋了下層的相同名字的目錄。用于隱藏低層分支的文件,也用于阻止readdir進入低層分支。
?Opaque的意思就是不允許任何下層的某個目錄顯示出來。
?在隱藏低層檔的情況下,whiteout的名字是’.wh.
?在阻止readdir的情況下,名字是’.wh..wh..opq’或者 ’.wh.__dir_opaque’。
相關問題
看到上面這些,你一定會有幾個問題:
其一、你可能會問,要有文件在原來的地方被修改了會怎么樣?mount的目錄會一起改變嗎?答案是會的,也可以是不會的。因為你可以指定一個叫udba的參數(全稱:User’s Direct Branch Access),這個參數有三個取值:
udba=none– 設置上這個參數后,AUFS會運轉的更快,因為那些不在mount目錄里發生的修改,aufs不會同步過來了,所以會有數據出錯的問題。
udba=reval– 設置上這個參數后,AUFS會去查文件有沒有被更新,如果有的話,就會把修改拉到mount目錄內。
udba=notify– 這個參數會讓AUFS為所有的branch注冊inotify,這樣可以讓AUFS在更新文件修改的性能更高一些。
其二、如果有多個rw的branch(目錄)被union起來了,那么,當我創建文件的時候,aufs會創建在哪里呢?aufs提供了一個叫create的參數可以供你來配置相當的創建策略,下面有幾個例子。
create=rr | round?robin輪詢。下面的示例可以看到,新創建的文件輪流寫到三個目錄中
reate=mfs[:second] | most?free?space[:second]選一個可用空間最好的分支。可以指定一個檢查可用磁盤空間的時間。
create=mfsrr:low[:second]選一個空間大于low的branch,如果空間小于low了,那么aufs會使用 round-robin 方式。
更多的關于AUFS的細節使用參數,大家可以直接在Ubuntu 14.04下通過man aufs來看一下其中的各種參數和命令。
AUFS的性能
AUFS的性能慢嗎?也慢也不慢。因為AUFS會把所有的分支mount起來,所以,在查找文件上是比較慢了。因為它要遍歷所有的branch。是個O(n)的算法(很明顯,這個算法有很大的改進空間的)所以,branch越多,查找文件的性能也就越慢。但是,一旦AUFS找到了這個文件的inode,那后以后的讀寫和操作原文件基本上是一樣的。
所以,如果你的程序跑在在AUFS下,open和stat操作會有明顯的性能下降,branch越多,性能越差,但是在write/read操作上,性能沒有什么變化。
IBM的研究中心對Docker的性能給了一份非常不錯的性能報告(PDF)《An Updated Performance Comparison of Virtual Machinesand Linux Containers》
我截了兩張圖出來,第一張是順序讀寫,第二張是隨機讀寫。基本沒有什么性能損失的問題。而KVM在隨機讀寫的情況也就有點慢了(但是,如果硬盤是SSD的呢?)
順序讀寫
隨機讀寫
-
Linux
+關注
關注
87文章
11311瀏覽量
209688
原文標題:DOCKER基礎技術:AUFS
文章出處:【微信號:LinuxDev,微信公眾號:Linux閱碼場】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論