javascript - 如何通过 Javascript 在 PythonAnywhere 上的 OpenCV 中访问网络摄像头？

Question

我在 Django 中开发了一个 WebApplication，它有一个包含 OpevCV 代码的 View 方法，当触发该代码时，它会打开用户网络摄像头以检测其面部。这个应用程序在我的本地服务器上运行良好，但是当我在 PythonAnywhere 上托管它时，它说找不到相机，因为我的 PA 托管不提供相机。所以有人建议我通过javascript打开网络摄像头，因为它处理客户端机器，然后将它的提要传递给我的托管服务器机器。但由于我是 Python 的新手，我无法弄清楚如何执行上述任务。
我找到了这段 js 代码，但我不知道在我的 Django 应用程序中如何以及在何处添加它。

使用 Javascript 获取提要的代码

var video = document.querySelector("#videoElement");

if (navigator.mediaDevices.getUserMedia) {
    navigator.mediaDevices.getUserMedia({video: true}).then(function(stream) {
      video.srcObject = stream;
  }).catch(function(err0r) {
      console.log("Something went wrong!");
  });
}

我的用于打开相机和检测人脸的 Python 代码如下(它在本地服务器中工作)

import cv2

cascade = cv2.CascadeClassifier('./haarcascade_frontalface_default.xml')

cam = cv2.VideoCapture(0)


while True:
    ret, frame = cam.read()
    frame = cv2.flip(frame, 1)

    if ret:
        gray = cv2.cvtColor(frame, cv2.COLOR_BGR2GRAY)

        faces = cascade.detectMultiScale(gray, scaleFactor=1.3, minNeighbors=3)

        for (x, y, w, h) in faces:
            cropped = cv2.resize(frame[y:y+h, x:x+w], (198,198))
            cv2.rectangle(frame, (x, y), (x+w, y+h), (255, 0, 0), 2)

        if cv2.waitKey(1) & 0xFF == ord('q'):
            break
            cv2.destroyAllWindows()

        cv2.imshow('Stream', frame)

任何帮助表示赞赏。先感谢您

Answer 1

我曾经做过类似的事情，我使用的方案如下:



如您所知，我们需要 javascript 从网络摄像头获取用户图片。我找到了an article这向我们展示了如何做到这一点，如果你想使用 Django，你只能使用前端(HTML 文件)。那是用于获取图片并将其编码为base64(字符串)并通过websocket发送的代码。

之后，我们希望 Django 服务于 websocket。过去，我是用 Flask 做的，而不是 Django，但是你可以看到如何使用 django-channel 创建 websocket 服务器。 .

对于最后一步，您需要一个带有 OpenCV 代码的函数。您需要 decode base64和 convert it to opencv

def modify_picture(img_data):
    # decode image
    img = from_b64(img_data)

    # your OpenCV filter
    gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)

    # encode image to base64
    return to_b64(gray)

当然，您不需要 while True和 cv2.imshow ，但返回新图片的 base64 版本。希望能帮助到你。

更新:我在我的 github 中写了一个示例代码.不在 Django 中，但仍然在 Python 中。希望它能给你更多的见解。