android - 连续捕获 Android 屏幕以在应用程序中处理

Question

我需要直播或某种方法来查看屏幕上当前显示的内容。我不想将屏幕截图保存到文件或录制视频等。我不想将屏幕流式传输到另一台设备(我不想进行截屏/mirracast)，我需要在 Android 应用程序上本地显示屏幕内容。

我为什么需要它？

我想编写一个 Android 应用程序，通过根据 Android 设备上显示的内容调整灯光来管理灯组。

• 需要 root 就可以了(我预计需要 root)。
• 需要额外的低级二进制文件也是可以接受的。
• 图像的质量不必与屏幕上的一样，低得多分辨率仍然可以接受

如果你说不可能，那你就错了。如果你下载适用于 Android 的 Prismatik 应用程序，你会看到我想要的东西，它可以抓取屏幕并管理我的 lightpack，在抓取屏幕时没有任何性能问题。我只想创建我自己的类似应用程序，但我会将其设为开源 GitHub 项目...

编辑: 我认为使用/dev/graphics/fb0 可能是答案的一部分。我不知道使用它的性能如何。

Answer 1

我找到了我自己问题的答案。

Android(也是 linux)有一个帧缓冲区文件(在 Android 上为 /dev/graphics/fb0)，您可以阅读该文件，其中包含整个屏幕内容的当前帧缓冲区。在大多数情况下，它实际上将包含 2 个帧用于双缓冲...此文件将随着屏幕上内容的变化而不断变化(对于我想使用它的目的，这很好，我不需要精确到 <毫秒级的内容，我只需要大致知道屏幕上显示的颜色是什么)

此文件包含 RAW 格式的图形。在我的 Galaxy S3 上，它包含每个像素 4 个字节。如果您需要知道应该读取多少字节才能获得当前屏幕(仅 1 帧)，则需要进行数学计算。我的屏幕是 720x1280 像素。

因此我需要阅读:

720 x 1280 像素 = 921,600 像素

921,600 像素 * 4 字节/像素 = 3,686,400 字节

您可以从中提取每个颜色 channel ，并进行所需的计算。读取数据的方法完全取决于您。您可以编写一段 native 代码来读取缓冲区并进行操作。或者，您可以使用输入流从 Android 代码中读取缓冲区。

根据您设备上加载的 ROM，您可能需要 root 才能访问此文件(大多数情况下您需要 root)