linux - perf.data 到文本或 csv

Question

我正在使用“perf record”命令以 1 毫秒的间隔对硬件计数器进行采样。它为我提供了一个“perf.data”作为输出文件，但我不知道有任何工具/命令可以帮助我将计数器数据从“perf.data”二进制文件读取到文本或 CSV 文件中。或者简单地说，我需要每 1 毫秒从“perf.data”文件中读取一次硬件计数器事件数据。

更多细节:

1. 我使用“perf stat”命令以 10 毫秒获取硬件计数器事件数据，但它不允许以小于 10 毫秒的采样间隔进行采样。因此，我使用“perf record”而不是 perf stat 在 1 毫秒内进行采样。一些有用的链接说服我使用 perf record: Perf Stat vs Perf Record和 Collecting the data for a partiulcar process from PMU for every 1 milli second

2. 我也尝试过“perf script”，但它只提供对某些硬件事件的支持。例如:缓存事件不受 perf 脚本支持。链接:Can't sample hardware cache events with linux perf

有人可以帮我解决这个问题吗？请假设我知道如何使用 perf record 命令并且已经有了 perf.data 文件(从 perf record 生成)

编辑:以下是使用答案反馈在终端上的命令及其输出消息:

1) perf record -e LLC-stores,LLC-loads,cache-misses -F 999 -R -T ls>ls.txt

输出:

[ perf record: Woken up 1 times to write data ]
[ perf record: Captured and wrote 0.017 MB perf.data (28 samples) ]

2) perf report -F sample,period --stdio

输出:

Total Lost Samples: 0
Samples: 9  of event 'LLC-stores'
Event count (approx.): 7440
     Samples        Period
............  ............
         9          7440

Samples: 9  of event 'LLC-loads'
Event count (approx.): 50008
     Samples        Period
............  ............
         9         50008

Samples: 10  of event 'cache-misses'
Event count (approx.): 351826
     Samples        Period
............  ............
        10        351826

3) perf script -F period,event

输出:

     1   LLC-stores: 
     1    LLC-loads: 
     1 cache-misses: 
     1    LLC-loads: 
     1 cache-misses: 
    61    LLC-loads: 
    58 cache-misses: 
  3097 cache-misses: 
     1   LLC-stores: 
    13   LLC-stores: 
  4748    LLC-loads: 
  1390   LLC-stores: 
190186 cache-misses: 
     1   LLC-stores: 
     1    LLC-loads: 
     1 cache-misses: 
     1    LLC-loads: 
     1 cache-misses: 
     1   LLC-stores: 
    52 cache-misses: 
    50    LLC-loads: 
    20   LLC-stores: 
  4110 cache-misses: 
  2002    LLC-loads: 
   748   LLC-stores: 
154319 cache-misses: 
 43143    LLC-loads: 
  5265   LLC-stores: 

4) perf stat -I 1 -e LLC-stores,LLC-loads,cache-misses ls>ls.txt

输出:

       time             counts unit events
 0.006476856              1,115      LLC-stores
 0.006476856             13,121      LLC-loads
 0.006476856              9,371      cache-misses

perf report 和 perf script 都提供样本数、周期和事件名称，但不提供每个样本的事件计数。如果您能告诉我如何获取我们从性能记录中获得的每 28 个样本的事件计数，那将非常有帮助。

Answer 1

你应该使用 perf record -e <event-name> ...每 1ms 采样一次事件。您似乎正在尝试阅读 perf.data文件并将其组织成人类可读的数据。你应该使用 perf report如果你不知道的话。 perf report命令读取 perf.data文件并生成简明的执行配置文件。下面的链接应该可以帮助你 -

Sample analysis with perf report

您可以修改 perf report输出你的要求。您也可以使用 perf report -F以 csv 格式指定多个列。

但是，另外，perf stat确实有一种机制可以使用 perf stat -x 以 csv 格式收集信息命令。

编辑#1:

(我正在使用 Linux-Kernel 4.14.3 进行评估。)

由于您想要获取每个样本的事件数，因此需要注意几件事。要计算每个样本的事件数，您需要知道采样周期。采样周期为您提供事件数，之后性能计数器将溢出并且内核将记录一个样本。所以基本上，在你的情况下，

sampling period = number of events per sample

现在有两种指定采样周期的方法。要么指定它，要么不指定它。

如果在执行 perf record 时，您指定采样周期.. 像这样:-

perf record -e <some_event_name> -c 1000 ...

这里的-c 1000表示采样周期为1000。在这种情况下，您有意强制系统每个样本记录1000个事件，因为采样周期由您固定。

另一方面，如果您没有指定采样周期，系统将尝试以1000 次采样/秒 的默认频率记录事件。这意味着系统将在需要时自动更改采样周期，以保持 1000 次采样/秒的频率。在这种情况下，要确定采样周期，您需要观察 perf.data文件。

具体来说，你需要打开perf.data文件使用命令:

perf script -D

输出看起来像这样:-

0 0 0x108 [0x38]: PERF_RECORD_FORK(1:1):(0:0)

0x140 [0x30]: event: 3
.
. ... raw event: size 48 bytes
.  0000:  03 00 00 00 00 00 30 00 01 00 00 00 01 00 00 00  ......0.........
.  0010:  73 79 73 74 65 6d 64 00 00 00 00 00 00 00 00 00  systemd.........
.  0020:  00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00  ................

0 0 0x140 [0x30]: PERF_RECORD_COMM: systemd:1/1

0x170 [0x38]: event: 7
.
. ... raw event: size 56 bytes
.  0000:  07 00 00 00 00 00 38 00 02 00 00 00 00 00 00 00  ......8.........
.  0010:  02 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00  ................
.  0020:  00 00 00 00 00 00 00 00 00 00 00 00 00 00 00 00  ................
.  0030:  00 00 00 00 00 00 00 00                          ........ 

您可以看到不同类型的记录，例如 PERF_RECORD_FORK和 PERF_RECORD_COMM甚至PERF_RECORD_MMAP .您需要特别注意文件中以 PERF_RECORD_SAMPLE 开头的记录。像这样:

14 173826354106096 0x10d40 [0x28]: PERF_RECORD_SAMPLE(IP, 0x1): 28179/28179: 0xffffffffa500d3b5 period: 3000 addr: 0
 ... thread: perf:28179
 ...... dso: [kernel.kallsyms]
            perf 28179 [014] 173826.354106: cache-misses:  ffffffffa500d3b5 [unknown] ([kernel.kallsyms])

如您所见，在这种情况下，周期为 3000，即在前一个采样事件和本次采样事件之间收集的事件数为 3000。(即每个样本的事件数为 3000)请注意，正如我上面提到的周期可能会被调整。因此，您需要从 perf.data 中收集所有 PERF_RECORD_SAMPLE 记录文件。