JavaCV FFmpegFrameGrabber 和 Java2DFrameConverter 创建奇怪的图像

Question

我是 JavaCV 新手，所以问题可能非常明显。我正在尝试做说起来容易做起来难的任务，即从视频中获取图像和音频，以便我可以开始制作视频编辑器。经过很多困惑和错误之后，我终于得到了结果，但它和错误一样奇怪。图像似乎在 x 方向上被挤压，右侧的额外空间是透明的(因此图像大小与视频大小匹配)。此外，它还有很多额外的透明像素，并且以奇怪的方式呈现出多种颜色。

图像应该是什么样子:https://gofile.io/d/1lQnNd

图像的样子:https://gofile.io/d/kc09G7

这是我的代码:

try {
    FFmpegFrameGrabber frameGrabber = new FFmpegFrameGrabber("C:/Users/mega12345mega/Desktop/Test Files/video.mp4");
    frameGrabber.setFormat("mp4");
    frameGrabber.start();

    int width = frameGrabber.getImageWidth();
    int height = frameGrabber.getImageHeight();
    System.out.println("width: " + width + ", height: " + height);

    Frame frame = frameGrabber.grabImage();
    if (frame == null)
        throw new Exception("Frame is NULL!");
    if (frame.image == null)
        throw new Exception("Frame Image is NULL!");

    BufferedImage bi = new BufferedImage(width, height, BufferedImage.TYPE_INT_ARGB);
    if (bi == null)
        throw new Exception("bi is NULL!");

    Java2DFrameConverter.copy(frame, bi);
    ImageIO.write(bi, "png", new File("C:/Users/mega12345mega/Desktop/Test Files/img.png"));

    frameGrabber.stop();
    frameGrabber.close();
} catch (Exception e) {
    throw new Exception("Error Getting Image", e);
}

如果您有兴趣，这里是控制台:

width: 1280, height: 720
Input #0, mov,mp4,m4a,3gp,3g2,mj2, from 'C:/Users/mega12345mega/Desktop/Test Files/video.mp4':
  Metadata:
    major_brand     : isom
    minor_version   : 512
    compatible_brands: isomiso2avc1mp41
    encoder         : Lavf58.29.100
  Duration: 00:00:04.95, start: 0.000000, bitrate: 16375 kb/s
    Stream #0:0(und): Video: h264 (High) (avc1 / 0x31637661), yuv420p, 1280x720 [SAR 1:1 DAR 16:9], 16401 kb/s, 60 fps, 60 tbr, 90k tbn, 120 tbc (default)
    Metadata:
      handler_name    : VideoHandler
    Stream #0:1(und): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, stereo, fltp, 2 kb/s (default)
    Metadata:
      handler_name    : SoundHandler

此外，如果我只是执行 frameGrabber.grab() 而不是 frameGrabber.grabImage() (我相信这会忽略音频)，则框架的图像属性为null(这就是 frame.image == null 语句的用途)。我不确定这是否属于一个新问题，但也感谢对此的帮助。

提前致谢!

Answer 1

我想出了如何解决这个问题，但我不确定为什么会这样。 (对此的评论表示赞赏!)

查看this issue后- 虽然问题不同 - 我发现他们在代码中使用了这个:

bi = new Java2DFrameConverter().convert(frame);

我所做的是:

Java2DFrameConverter.copy(frame, bi);

出于某种原因，这解决了问题。
显然，通过解决方案，您也可以删除此行:

new BufferedImage(width, height, BufferedImage.TYPE_INT_ARGB);