android - CameraX图像分析的imageproxy大小和PreviewView大小不一样

Question

我正在尝试使用 Firebase 的 MLKit 与 Camerax 进行人脸检测。我很难让图像分析的 imageproxy 大小与 PreviewView 的大小相匹配。对于图像分析和 PreviewView，我将 setTargetResolution() 设置为 PreviewView 的宽度和高度。但是，当我在分析器中检查 Imageproxy 的大小时，它给我的宽度是 1920，高度是 1080。我的 PreviewView 宽度为 1080，高度为 2042。当我在 setTargetResolution() 中交换宽度和高度以进行图像分析时，imageproxy 中的宽度和高度都为 1088。我的预览 View 也锁定为纵向模式。
最终，我需要将原始图像代理数据和面部点数据输入到 AR 代码中。因此，仅放大绘制面部点的图形叠加层对我不起作用。
问:如果无法在 camerax 库中解决此问题，如何缩放从分析器返回的图像代理以匹配预览 View ？
我正在使用 Java 和最新的 Camerax 库:
def camerax_version = "1.0.0-beta08"

Answer 1

确保预览和图像分析用例具有相同的输出分辨率是相当困难的，因为不同的设备支持不同的分辨率，并且图像分析对其输出的最大分辨率有硬性限制(如 the documentation 中所述)。
为了使图像分析帧和 UI/PreviewView 的坐标之间的转换更容易，您可以将预览和 ImageAnalysis 设置为使用相同的纵横比，例如 AspectRatio.RATIO_4_3 ，以及 PreviewView(例如，通过将其包装在 ConstraintLayout 中，并对其宽度/高度比设置约束)。这样，检测到的人脸坐标从分析器映射到 UI 变得更加直接，您可以在 this sample 中查看它。 .
或者，您可以使用 CameraX 的 ViewPort我相信的 API 仍然是实验性的。它允许为一组用例定义一个视野，从而使它们的输出匹配并具有所见即所得。您可以找到它的用法示例here .对于你的情况，你会写这样的东西。

Preview preview = ...
preview.setSurfaceProvider(previewView.getSurfaceProvider());

ImageAnalysis imageAnalysis = ...
imageAnalysis.setAnalyzer(...);

ViewPort viewPort = preview.getViewPort();
UseCaseGroup useCaseGroup = new UseCaseGroup.Builder()
                .setViewPort(viewPort)
                .addUseCase(preview)
                .addUseCase(imageAnalysis)
                .build();

cameraProvider.bindToLifecycle(
                lifecycleOwner,
                cameraSelector,
                usecaseGroup);

在这种情况下，您的分析器接收到的每个 ImageProxy 都将包含一个 crop rect与 PreviewView 显示的内容相匹配。因此，您只需裁剪图像，然后将其传递给人脸检测器。