android - 使用 FFmpeg 编码时处理原始数据的正确方法

Question

我正在开发用于通过 ffmpeg 编码/解码原始数据的 android 库。我发现的每个示例都使用文件，它读取或写入文件。但是，我将表示 RGBA 图像的原始字节数组用于编码器输入，将字节数组用于编码器输出。让我们专注于这个问题的编码部分。

我的功能如下所示:

int encodeRGBA(uint8_t *image, int imageSize, int presentationTimestamp,
 uint8_t *result, int resultSize)

在哪里 image是包含原始 rgba 图像数据的字节数组， imageSize是该数组的长度， presentationTimestamp只是 AVFrame 使用的计数器用于设置 pts , result是预先分配的字节数组，具有一些定义的长度(当前大小与宽度 x 高度匹配)和 resultSize是字节数组长度(宽 x 高)。返回的 int 值表示预分配数组的实际使用长度。我知道这不是将数据发送回 java 的最佳方法，这也是问题的一部分。有没有更好的返回结果的方法？

找到示例 here对于编码，直接将字节数据写入 frame->data[0] (不同格式的不同方法，RGBA 或 YUV)。但是谷歌搜索“ffmpeg 从内存中读取”会得到像 this 这样的例子。 , this或 this .他们都建议使用 AVIOContext .

我很困惑如何使用 AVFormatContext 和 AVCodecContext 进行编码？

目前我的编码器使用第一种方法工作，并且我成功地返回了所描述的结果(使用预分配的字节数组)。我想知道这是否是错误的方法？我应该使用 AVIOContext用于处理字节数组？

Answer 1

Should I be using AVIOContext for handling byte arrays?

No. AVIOContext 如果用于处理内存中的文件和/或容器。在这种情况下，需要 avformat 从 A 字节数组中读取编码帧。您直接使用原始帧，不需要使用 avformat。