android - 在 Unity Android 中从 ShortBuffer 读取时出现 IllegalStateException

Question

我正在使用 Unity 开发一款游戏，我需要来自媒体缓冲区的原始音频数据。以下代码在 Unity 中用作 jar 插件。它在 android 4.x 上运行没有问题。但是当我尝试在 Android 5.0.1 或 5.1 上运行它时，出现以下异常，但仅当我尝试打开 aac 或 m4a 文件时。有什么建议吗？

这是我读取音频缓冲区的函数:

   public short[] ReadNextSamples() {
        if (sawOutputEOS) {
            return new short[0];
        }
        int res;
        while (true)
        {
            res = codec.dequeueOutputBuffer(info, kTimeOutUs);

        if (res >= 0)
        {
            if (info.size > 0)
            {
                break;
            }
            else
            {
                codec.releaseOutputBuffer(res, false);

                if ((info.flags & MediaCodec.BUFFER_FLAG_END_OF_STREAM)!= 0)
                {
                    sawOutputEOS = true;
                    return new short[0];
                }
            }
        }
    }
    int outputBufIndex = res;
    ByteBuffer buf = codecOutputBuffers[outputBufIndex];
    int sampleSize = info.size / 2;
    short[] sampleValues = new short[sampleSize];
    ShortBuffer shBuf = buf.asShortBuffer();

    try {
        shBuf.get(sampleValues, 0, sampleSize);
    } catch (Exception e) {
        //the exception is being thrown here
        e.printStackTrace();
    }

    codec.releaseOutputBuffer(outputBufIndex, false);
    if ((info.flags & MediaCodec.BUFFER_FLAG_END_OF_STREAM) != 0) {
        sawOutputEOS = true;
    }
    return sampleValues;
}

异常:

06-04 16:18:01.188: W/System.err(20884): java.lang.IllegalStateException: buffer is inaccessible
06-04 16:18:01.188: W/System.err(20884): at java.nio.DirectByteBuffer.checkIsAccessible(DirectByteBuffer.java:551)
06-04 16:18:01.188: W/System.err(20884): at java.nio.DirectByteBuffer.get(DirectByteBuffer.java:155)
06-04 16:18:01.188: W/System.err(20884): at java.nio.ByteBufferAsShortBuffer.get(ByteBufferAsShortBuffer.java:103)
06-04 16:18:01.190: W/System.err(20884): at com.pocketgames.musiverse.MediaDecoder.ReadNextSamples(MediaDecoder.java:112)
06-04 16:18:01.190: W/System.err(20884): at com.unity3d.player.ReflectionHelper.nativeProxyInvoke(Native Method)
06-04 16:18:01.190: W/System.err(20884): at com.unity3d.player.ReflectionHelper.a(Unknown Source)
06-04 16:18:01.190: W/System.err(20884): at com.unity3d.player.ReflectionHelper$1.invoke(Unknown Source)
06-04 16:18:01.190: W/System.err(20884): at java.lang.reflect.Proxy.invoke(Proxy.java:397)
06-04 16:18:01.190: W/System.err(20884): at $Proxy0.run(Unknown Source)
06-04 16:18:01.191: W/System.err(20884): at java.lang.Thread.run(Thread.java:818)

Answer 1

基本上您应该使用 API 级别相关的代码。我想你可能已经想通了。但是为了记录，你应该使用

ByteBuffer buf = codecOutputBuffers[outputBufIndex];

API 级别 < 21

和

ByteBuffer buf = codec.getOutputBuffer(outputBufIndex);

对于 API 级别 >= 21。

代码看起来像这样:

final int version = Build.VERSION.SDK_INT;
ByteBuffer buf;
if (version >= 21) {
    buf = codec.getOutputBuffer(outputBufIndex);
} else {
    buf = codecOutputBuffers[outputBufIndex];
}

如果您查看MediaCodec 类的源代码，getOutputBuffer 的代码是:

@Nullable
public ByteBuffer getOutputBuffer(int index) {
    ByteBuffer newBuffer = getBuffer(false /* input */, index);
    synchronized(mBufferLock) {
        invalidateByteBuffer(mCachedOutputBuffers, index);
        mDequeuedOutputBuffers.put(index, newBuffer);
    }
    return newBuffer;
}

因此，您得到的错误与获取锁 mBufferLock 有关，这可能是 API 级别 >= 21 的 MediaCodec 实现所必需的，因此您得到与无法访问相关的错误。我希望这会有所帮助。