android - 使用 mp4parser ，如何处理从 Uri 和 ContentResolver 获取的视频？

Question

背景

我们想让用户从任何应用程序中选择一个视频，然后将视频剪辑到最长 5 秒。

问题

为了选择一个 Uri，我们让它工作正常(解决方案可用 here)。

至于修剪本身，除了一个名为 "k4l-video-trimmer" 的库之外，我们找不到任何具有许可的好库。 .例如，库“FFmpeg”被视为未经许可，因为它使用 GPLv3，这要求使用它的应用程序也是开源的。此外，正如我所读，它需要相当多的空间(大约 9MB)。

可悲的是，这个库 (k4l-video-trimmer) 非常旧并且多年没有更新，所以我不得不 fork 它 (here) 以便很好地处理它。它使用一个名为 "mp4parser" 的开源库进行修剪。

问题是，这个库似乎只能处理文件，而不能处理 Uri 或 InputStream，所以即使是样本在选择不是的项目时也会崩溃不像普通文件那样可访问，甚至有它无法处理的路径。我知道在很多情况下可以获得文件的路径，但在许多其他情况下，它不是，而且我也知道可以只复制文件( here )，但这不是一个好方法解决方案，因为文件可能很大并且占用大量空间，即使它已经可以访问。

我尝试过的

图书馆有 2 个地方使用文件:

1. 在“K4LVideoTrimmer”文件中，在“setVideoURI”函数中，它只是获取要显示的文件大小。这里的解决方案非常简单，基于 Google's documentation :

   public void setVideoURI(final Uri videoURI) {
       mSrc = videoURI;
       if (mOriginSizeFile == 0) {
           final Cursor cursor = getContext().getContentResolver().query(videoURI, null, null, null, null);
           if (cursor != null) {
               int sizeIndex = cursor.getColumnIndex(OpenableColumns.SIZE);
               cursor.moveToFirst();
               mOriginSizeFile = cursor.getLong(sizeIndex);
               cursor.close();
               mTextSize.setText(Formatter.formatShortFileSize(getContext(), mOriginSizeFile));
           }
       }
    ...
   

2. 在“TrimVideoUtils”文件中，在调用“genVideoUsingMp4Parser”函​​数的“startTrim”中。在那里，它调用“mp4parser”库使用:

   Movie movie = MovieCreator.build(new FileDataSourceViaHeapImpl(src.getAbsolutePath()));
   

   它说他们使用 FileDataSourceViaHeapImpl(来自“mp4parser”库)来避免 Android 上的 OOM，所以我决定继续使用它。

   事情是，它有 4 个 CTORS，都期望文件的一些变体:File、filePath、FileChannel、FileChannel+fileName。

问题

1. 有办法克服这个问题吗？

也许可以使用 ContentResolver 和 Uri 来实现 FileChannel 并模拟真实文件？我想这可能是可能的，即使这意味着在需要时重新打开 InputStream...

为了查看我的工作成果，您可以克隆项目 here .只知道它不做任何修剪，因为它在“K4LVideoTrimmer”文件中的代码已被注释:

//TODO handle trimming using Uri
//TrimVideoUtils.startTrim(file, getDestinationPath(), mStartPosition, mEndPosition, mOnTrimVideoListener);

1. 对于这个修整库，是否有更好的替代方案，它也是宽松的(例如，Apache2/MIT 许可证的含义)？没有这个问题的？或者甚至是 Android 框架本身？我想MediaMuxer类可能有帮助(如写的 here )，但我认为它可能需要 API 26，而我们需要处理 API 21 及更高版本...

---

编辑:

我认为我已经通过使用不同的修整解决方案找到了解决方案，并写下了它 here , 但遗憾的是它无法处理一些输入视频，而 mp4parser 库可以处理它们。

请让我知道是否可以修改 mp4parser 以处理此类输入视频，即使它来自 Uri 而不是文件(没有仅复制到视频文件的解决方法)。

Answer 1

首先要注意:我不熟悉 mp4parser 库，但你的问题看起来很有趣，所以我看了一下。

我认为值得您查看代码注释中所说的“主要用于测试”的类之一。 InMemRandomAccessSourceImpl。要从任何 URI 创建电影，代码如下:

try {
    InputStream  inputStream = getContentResolver().openInputStream(uri);
    Log.e("InputStream Size","Size " + inputStream);
    int  bytesAvailable = inputStream.available();
    int bufferSize = Math.min(bytesAvailable, MAX_BUFFER_SIZE);
    final byte[] buffer = new byte[bufferSize];

    int read = 0;
    int total = 0;
    while ((read = inputStream.read(buffer)) !=-1 ) {
        total += read;
    }
    if( total < bytesAvailable ){
        Log.e(TAG, "Read from input stream failed")
        return;
    }
    //or try inputStream.readAllBytes() if using Java 9
    inputStream.close();

    ByteBuffer bb = ByteBuffer.wrap(buffer);
    Movie m2 = MovieCreator.build(new ByteBufferByteChannel(bb),
        new InMemRandomAccessSourceImpl(bb), "inmem");

} catch (FileNotFoundException e) {
    e.printStackTrace();
} catch (IOException e) {
    e.printStackTrace();
}

但我要说的是，您想要实现的目标与解析器采用的方法之间似乎有些冲突。它依赖于本地文件以避免大量内存开销，并且只有在整个数据集可用时才能随机访问字节，这与流式方法不同。

在为解析器提供缓冲区之前，它需要一次性至少缓冲您的剪辑所需的数据量。如果您希望抓取较短的部分并且缓冲不太麻烦，那么这对您来说可能是可行的。如果从 InputStream 读取有问题，您可能会遇到 IO 异常等问题，尤其是当它是远程内容时，而您真的不希望现代系统上的文件出现这种情况。

还有 MemoryFile 需要考虑，它提供了一个支持 ashmem 的类似文件的对象。我认为可以以某种方式解决这个问题。