opencv - ffmpeg FPS 信息与视频不匹配

Question

我有一堆视频，其中包含一些关于视频中发生的事情的统计信息。一条这样的信息以视频的时间形式给出，以秒为单位，最多保留一位小数。

要获取视频的 FPS，我使用 ffmpeg -i

但是当我使用给定的 FPS 手动计算一个特定帧的时间时，它不匹配。

例如，ffmpeg 输出 FPS = 30。

我看视频统计，156.8 = 2.368 处的帧必须是第 4704 帧。我使用“skvideo”打开视频，读取所有帧，然后查看第 4704 帧。这是时间 2.12 左右的某个框架？我在多个视频中检查了多个此类实例，这是一种常见行为。

我不明白为什么会这样，我该如何解决这个问题？

因此我不受 ffmpeg 的限制。 Skvideo 被用来阅读视频。我试过 opencv，目前它不能与 VideoCapture 一起使用，重新安装它对我来说很费时间。但我想 'opencv/skvideo' 应该无关紧要，也可以手动计算帧数。

所以，在解决方案中，我正在寻找 -

1. 给定视频内部的时间戳，我如何找到特定时间位置的帧？

2. 如果有人可能已经处理过这个，这与 THUMOS 有关数据集。我在 Ubuntu 16.04 上

编辑_1

实际上我可以更具体，因为它是公开可用的数据。时间限制是一项重要的事件。例如，在一段视频中，篮球扣篮发生在什么时候？它成对给出 - [开始结束]。有些视频有多个事件，有些只有一个。

Here是一个示例视频，以下是事件时间。

[[  16.5, 20.8],
[  26.6, 32.2],
[  34.8, 42.1],
[  47.8, 50.0],
[  58.1, 62.9],
[  65.6, 67.2],
[  68.5, 74.0],
[  76.4, 78.3],
[  78.7, 79.8],
[  80.8, 82.1],
[  85.0, 87.3],
[  90.1, 91.4],
[  98.5, 100.3]]

我也尝试手动检查，32.87 FPS“几乎”适用于少数视频，但不适用于所有视频。几乎意味着它关闭了 ~ 10 帧。这对我的任务来说是一个巨大的差异，我需要精确的框架。

此外，必须有一些方法，因为可以通过多个视频播放器直观地观察到数据集中的时间是正确的。

Answer 1

如果您的目标是提取与时间戳相对应的帧，请使用

ffmpeg -i in.mp4 -vf select='lt(t,TS)*lt(TS-t,1/FPS)' -vsync 0 frame.png

TS 应替换为您的时间戳，FPS 应替换为帧率，例如'lt(t,78.7)*lt(78.7-t,1/30)'

如果视频像您的视频那样可变帧率，则帧索引不可靠。