安裝

在開發(fā)板上使用apt安裝perf命令：

apt install -y perf

或者進入kernel內(nèi)核源碼目錄tools/perf，交叉編譯執(zhí)行make，然后拷貝到開發(fā)板中運行。

認識Perf

perf可以用來統(tǒng)計一個程序運行期間花了多少時間、上下文切換次數(shù)、cache命中率等一些性能相關的事件，通過perf可以分析一個程序的性能瓶頸，從而對程序做出優(yōu)化。

perf性能事件的關系圖如下:

執(zhí)行命令：

perf list

可以看到如下顯示：

branch-instructions OR branches                    [Hardware event]
branch-misses                                      [Hardware event]
cache-misses                                       [Hardware event]
... ...

context-switches OR cs                             [Software event]
page-faults OR faults                              [Software event]
... ...

L1-dcache-load-misses                              [Hardware cache event]
L1-dcache-loads                                    [Hardware cache event]
... ...

block:block_bio_backmerge                          [Tracepoint event]
clk:clk_enable                                     [Tracepoint event]
dma_fence:dma_fence_destroy                        [Tracepoint event]
... ...

其中

• hardware event 是硬件相關的性能事件
• software event 是軟件相關的性能事件
• hardware cache event 是cache相關的性能事件
• tracepoint event 是內(nèi)核設置的相關的性能事件

perf的性能事件主要可以分為以上四類，但是像hardware event這類事件依賴于硬件的實現(xiàn)，如果硬件不支持也無法統(tǒng)計。部分的其它事件在使用的過程也會遇到不支持的情況。

另外執(zhí)行perf list命令并不會把所有的事件都列舉出來，perf list只會顯示支持的事件，如果不支持就看不到了。

Perf功能概覽

perf的功能可以分為基礎子命令和功能型子命令兩大類。

基礎子命令是最常用的命令，是必須要學會的。

基礎子命令如下 ：

功能型子命令如下 ：

更多的命令詳細參考perf -h說明。

Perf基礎子命令

perf list

perf list可以列舉支持哪些事件：

perf stat

perf stat可以采樣perf list所列舉的事件，使用幫助如下：

perf stat -h

-a, --all-cpus        system-wide collection from all CPUs
-A, --no-aggr         disable CPU count aggregation
-B, --big-num         print large numbers with thousands' separators
-C, --cpu < cpu >       list of cpus to monitor in system-wide
-D, --delay < n >       ms to wait before starting measurement after program start (-1: start with events disabled)
-d, --detailed        detailed run - start a lot of events
-e, --event < event >   event selector. use 'perf list' to list available events
-G, --cgroup < name >   monitor event in cgroup name only
-g, --group           put the counters into a counter group
... ...

perf stat可以通過-e指定某個事件，例如統(tǒng)計ls命令的cpu-clock事件：

對于tracepoint event事件，其本身就分為很多種類型，例如：block:block_bio_backmerge，就表示block這個類型的block_bio_backmerge這個采樣點。

tracepoint event支持采樣類型和采樣點非常多，有clk，mmc，sched等類型，而其中每個采樣類型又分為更多的采樣點，因此， 可以通過perf list后面跟上采樣類型的名字 ，來查看某個特性類型的采樣點。

可以看到，一個sched類型，對應很多采樣點。

對應著sched:sched_switch這個采樣點。通過perf stat子命令可以得到觀測結果：

可以看到，執(zhí)行ls，cpu運行了29次sched_switch，也就是對應的__schedule函數(shù)。

其實tracepoint event最強大的地方在于時間的統(tǒng)計 ，內(nèi)核中每個采樣點都代表了一些重要的時刻，比如，進程切換了，調(diào)度器把進程放入runqueue，或者開始真正的進程運行，都會加上一個tracepoint，來記錄時間，從而為分析和調(diào)試提供支持。

perf record & perf report

perf stat子命令展示的是 即時的數(shù)據(jù) ，若想要獲取更多信息，則需要用perf record子命令將信息組成一個perf.data文件，并利用perf report將其解析并展示出來。

因此perf record和perf report命令通常是一起使用的。

同樣的，perf record和perf report子命令也具有相當多的參數(shù)。

perf report -h

-b, --branch-stack    use branch records for per branch histogram filling
-c, --comms < comm[,comm...] >
only consider symbols in these comms
-C, --cpu < cpu >       list of cpus to profile
... ...

例如對context-switches事件采樣：

perf record -e context-switches -a sleep 1

然后執(zhí)行perf report顯示更多的詳細信息：

可以看到，perf report子命令不光展示了cpu執(zhí)行sleep 1時發(fā)生的上下文切換次數(shù)，還展示了這切換都分布在哪些進程中。

perf script

perf script主要被用來生成perf.unfold文件，被交給一個名叫FlameGraph（ 火焰圖 ）的工具，這個工具會解析perf.unfold數(shù)據(jù)，然后將其轉(zhuǎn)換成易于人類閱讀和分析的圖形。

火焰圖

wget "https://github.com/brendangregg/FlameGraph/archive/master.zip"
unzip master.zip

如果希望了解CPU在一段時間內(nèi)的都運行了哪些函數(shù)以及各函數(shù)都消耗了多少時間，就可以使用On CPU火焰圖，這種火焰圖基于cpu-cycles事件進行采樣，然后通過svg圖片格式展現(xiàn)出來

dd if=/dev/zero of=/tmp/testfile bs=4K count=102400 &
perf record -e cpu-cycles -a -g sleep 1
perf script > perf.unfold
cd FlameGraph-master
./stackcollapse-perf.pl < ../perf.unfold | ./flamegraph.pl > ../perf.svg

首先在后臺啟動一個dd命令，讓它持續(xù)運行一段時間，然后開啟perf record，記錄一秒鐘內(nèi)cpu都運行了多少個cpu-cycles，也就是時間（同時使能-g，就會一并記錄運行的函數(shù)以及調(diào)用關系），再利用perf script命令將perf.data轉(zhuǎn)成perf.unfold，最后利用FlameGraph工具將其轉(zhuǎn)換成一個perf.svg，這是一個圖形文件，用瀏覽器打開后會得到這樣一幅圖：

此圖記錄著函數(shù)調(diào)用關系及其cpu-cycles（時間）占比，就像一縷縷升起的火苗，所以被稱之為火焰圖。

火焰圖還可以通過鼠標點擊放大，觀察其細節(jié)，如下：

Perf功能型子命令

列舉2個perf功能型子命令實例top和bench，更多的參考-h列舉的說明。

perf top

perf top子命令動態(tài)地顯示各種采樣事件，例如：

perf top -e sched:sched_wakeup

perf bench

perf bench子命令是perf內(nèi)部集成的一個benchmark測試程序，可以看一下perf bench支持哪些benchmark：

可見，benchmark有sched，mem,futex等幾大類

perf bench mem

而mem里又包含了2個測試點

perf bench mem memcpy

perf bench mem memset

總結

perf是用于性能分析的一個工具，功能強大，用法也非常多。但是要真正用明白，懂得分析，需要長時間的學習和沉淀。

例如必須得知道cycles、instructions、分支預測等這些是什么意思，每個性能事件的統(tǒng)計值高低所帶來的影響分別是什么，如何增加/降低某個性能事件的統(tǒng)計值等等，只有在具備這些理論基礎的情況下，去分析perf的統(tǒng)計值才比較有意義。