webcam - 为什么我可以将 h264 编码的视频从网络摄像头传输到显示器和文件，而不是原始视频？

Question

我想从 Logitech C920 网络摄像头流式传输原始视频，同时 两者 使用 GStreamer 1.0 显示和保存视频到文件。

如果我从相机传输 h264 编码的视频(相机提供硬件编码的 h264)，这会起作用，但如果我从相机传输原始视频，它就会失败。但是，如果我仅显示或仅保存到文件，则流式传输原始视频有效。

为什么它适用于 h264 视频流而不适用于原始视频流？

h264 编码的视频流从相机到显示器和文件(作品):

gst-launch-1.0 -v v4l2src device=/dev/video0 \
    ! video/x-h264,width=640,height=480,framerate=15/1 ! tee name=t \
    t. ! queue ! h264parse ! avdec_h264 ! xvimagesink sync=false \
    t. ! queue ! h264parse ! matroskamux \
    ! filesink location='h264_dual.mkv' sync=false

从摄像头到唯一显示的原始视频流 (WORKS):

gst-launch-1.0 -v v4l2src device=/dev/video0 \
    ! video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 \
    ! xvimagesink sync=false

从相机到唯一文件(作品)的原始视频流:

gst-launch-1.0 -v v4l2src device=/dev/video0 \
    ! video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 \
    ! videoconvert ! x264enc ! matroskamux \
    ! filesink location='raw_single.mkv' sync=false

从相机到显示器和文件的原始视频流(失败):

gst-launch-1.0 -v v4l2src device=/dev/video0 \
    ! video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 \
    ! tee name=t \
    t. ! queue ! xvimagesink sync=false \
    t. ! queue ! videoconvert ! x264enc ! h264parse ! matroskamux \
    ! filesink location='raw_dual.mkv' sync=false

最后一个命令(显示和文件的原始视频)失败，没有任何警告或错误。 gst-launch 终端输出与仅写入文件时完全相同。 xvimage 窗口出现并显示来自相机的图像，但图像不会改变(即它被卡住)。零字节文件也出现。

我已经尝试了上述命令的多个版本，但我认为这些是可以重现问题的最小命令。

有谁明白我做错了什么？

Answer 1

可以将来自网络摄像头(并非特定于 C920)的原始视频流式传输到显示器和 h.264 编码文件。 x264enc属性(property)tune需要设置为 zerolatency .

h.264 示例:
gst-launch-1.0 -v v4l2src device=/dev/video0 \
! video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 \
! tee name=t t. ! queue ! xvimagesink sync=false t. ! queue ! \
videoconvert ! x264enc tune=zerolatency ! h264parse ! \
matroskamux ! filesink location='raw_dual.mkv' sync=false
或者，可以完全跳过 h.264 并编码为 theora 或 vp8。

理论示例:
gst-launch-1.0 -v v4l2src device=/dev/video0 ! \
video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 ! \
tee name=t t. ! queue ! xvimagesink sync=false t. ! queue ! \
videoconvert ! theoraenc ! theoraparse ! \
matroskamux ! filesink location='raw_dual.mkv' sync=false
vp8 示例:
gst-launch-1.0 -v v4l2src device=/dev/video0 ! \
video/x-raw,format=YUY2,width=640,height=480,framerate=15/1 ! \
tee name=t t. ! queue ! xvimagesink sync=false t. ! queue ! \
videoconvert ! vp8enc ! \
matroskamux ! filesink location='raw_dual.mkv' sync=false
非常感谢 Jan Spurny 和 Tim。