android - 使用 renderscript 将相机 YUV 数据转换为 ARGB

Question

我的问题是:我在 Android 中设置了一个摄像头，并使用 onPreviewFrame 监听器接收预览数据，该监听器向我传递一个 byte[] 数组，其中包含默认 android YUV 格式的图像数据(设备不支持 R5G6B5 格式)。每个像素由 12 位组成，这让事情变得有点棘手。现在我要做的是将 YUV 数据转换为 ARGB 数据，以便用它进行图像处理。这必须通过 renderscript 来完成，以保持高性能。

我的想法是在一个元素中传递两个像素(即 24 位 = 3 个字节)，然后返回两个 ARGB 像素。问题是，在 Renderscript 中，u8_3(一个 3 维 8 位向量)以 32 位存储，这意味着最后 8 位未使用。但是当将图像数据复制到分配中时，所有 32 位都被使用，所以最后 8 位丢失了。即使我使用 32 位输入数据，最后 8 位也没有用，因为它们只有 2/3 个像素。当定义一个包含 3 字节数组的元素时，它实际上具有 3 个字节的实际大小。但是 Allocation.copyFrom() 方法没有用数据填充 in-Allocation，认为它没有正确的数据类型来填充 byte[]。

renderscript 文档指出，有一个 ScriptIntrinsicYuvToRGB 应该在 API 级别 17 中执行此操作。但实际上该类不存在。我已经下载了 API Level 17，尽管它似乎不再可下载。有没有人有任何关于它的信息？有没有人尝试过 ScriptIntrinsic？

总而言之，我的问题是:如何将相机数据快速、硬件加速地转换为 ARGB 数据？

这就是在 Dalvik VM 中执行此操作的方法(在网上某处找到了代码，它可以工作):

@SuppressWarnings("unused")
private void decodeYUV420SP(int[] rgb, byte[] yuv420sp, int width, int height) {  
    final int frameSize = width * height;  
    for (int j = 0, yp = 0; j < height; j++) {
        int uvp = frameSize + (j >> 1) * width, u = 0, v = 0;  
        for (int i = 0; i < width; i++, yp++) {  
            int y = (0xff & ((int) yuv420sp[yp])) - 16;  
            if (y < 0)
                y = 0;  
            if ((i & 1) == 0) {  
                v = (0xff & yuv420sp[uvp++]) - 128;  
                u = (0xff & yuv420sp[uvp++]) - 128;  
            }  
            int y1192 = 1192 * y;  
            int r = (y1192 + 1634 * v);  
            int g = (y1192 - 833 * v - 400 * u);  
            int b = (y1192 + 2066 * u);  
            if (r < 0)
                r = 0;
            else if (r > 262143)
                r = 262143;  
            if (g < 0)
                g = 0;
            else if (g > 262143)
                g = 262143;  
            if (b < 0)
                b = 0;
            else if (b > 262143)  
                b = 262143;  
            rgb[yp] = 0xff000000 | ((r << 6) & 0xff0000) | ((g >> 2) & 0xff00) | ((b >> 10) & 0xff);  
        }
    }
}

Answer 1

我相信您会发现 LivePreview 测试应用程序很有趣……它是最新 Jelly Bean (MR1) 中 Android 源代码的一部分。它实现了相机预览，并使用 ScriptIntrinsicYuvToRgb 将预览数据转换为 Renderscript。您可以在此处在线浏览源代码:

LivePreview