c# - 在 C# 中转换图像

Question

编辑:已解决!有关详细信息，请参阅下面我的回答。我找不到原始问题的答案，但我找到了替代解决方案

这个问题可能会在其他地方问到，但我已经搜索了好几天，找不到任何有帮助的东西。

问题:我需要一次将“Stream”转换为“image(bgr, byte)”，有没有直接从系统转换的方法/命令.Drawing.Image.FromStream 到 Emgu.CV.Image(Bgr, Byte)，无需从 stream 到 image 到 bitmap 到 图像(bgr，字节)？

信息:作为我论文项目的一部分，我在 Visual Studio 2010 中使用 c# 进行编码。我正在从网络上的 IP 摄像机获取图像流，并应用许多算法来检测面部/提取面部特征并识别个人面部。在我的笔记本电脑本地摄像头上，我可以达到大约 25~(给定或接受)的 FPS，包括算法，因为我不必转换图像。对于 IP 摄像机流，我需要对其进行多次转换以达到所需的格式，结果约为 5-8fps。

(我知道我目前的方法效率极低，这就是我来这里的原因，我实际上总共将图像转换了 5 次(甚至灰度缩放)，实际上只使用了我处理器内存的一半(i7、8gb RAM )).它必须是 image(bgr, byte)，因为这是算法可以使用的唯一格式。

我用来获取图像的代码:

//headers
using System.IO
using System.Threading;
using System.Net;
//request a connection
req = (HttpWebRequest)HttpWebRequest.Create(cameraUrl);
//gives chance for timeout for errors to occur or loss of connection
req.AllowWriteStreamBuffering = true;
req.Timeout = 20000;
//retrieve response (if successfull)
res = req.GetResponse();
//image returned
stream = res.GetResponseStream();

我在后台管理连接、数据、安全等方面有很多东西，我已将其缩短为上述代码。我当前将图像转换为所需输出的代码:

//Convert stream to image then to bitmap
Bitmap bmpImage = new Bitmap(System.Drawing.Image.FromStream(stream));                    
//Convert to emgu image (desired goal)
currentFrame = new Emgu.CV.Image<Bgr, Byte>(bmpImage);
//gray scale for other uses
gray = currentFrame.Convert<Gray, Byte>();

我知道有一种方法可以在本地临时保存图像，但出于安全考虑，我需要避免这种情况。我正在寻找更多的直接转换来帮助节省处理能力。我忽略了什么吗？感谢所有帮助。

感谢阅读。 (如果有人需要更多细节，我会更新这个)-戴夫

Answer 1

您有几个潜在的瓶颈，其中最重要的是您可能将流 jpeg 解码为图像，然后将其转换为位图，然后转换为 openCV 图像。

解决此问题的一种方法是完全绕过 .NET 镜像。这将涉及尝试直接使用 libjpeg。有一个 free port of it here在 C# 和 IIRC 中，您可以连接到它以在每个扫描线的基础上被调用以填充缓冲区。

缺点是您在托管代码中解码 JPEG 数据，其运行速度至少比等效的 C 慢 1.5 倍，但坦率地说，我预计网络速度会大大降低这一速度。

OpenCV 应该能够直接读取 jpeg 图像(想猜猜它们在幕后使用什么？调查显示:libjpeg)，这意味着您可以缓冲整个流并将其交给 OpenCV 并完全绕过 .NET 层.