python - OpenCV MSER 检测文本区域 - Python

Question

我有一张发票图片，我想检测上面的文字。所以我打算用2个步骤:首先是识别文本区域，然后使用OCR识别文本。

为此，我在 python 中使用 OpenCV 3.0。我能够识别文本(包括一些非文本区域)，但我还想从图像中识别文本框(也不包括非文本区域)。

我的输入图片是:

输出是:

我为此使用以下代码:

img = cv2.imread('/home/mis/Text_Recognition/bill.jpg')
mser = cv2.MSER_create()
gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY) #Converting to GrayScale
gray_img = img.copy()

regions = mser.detectRegions(gray, None)
hulls = [cv2.convexHull(p.reshape(-1, 1, 2)) for p in regions]
cv2.polylines(gray_img, hulls, 1, (0, 0, 255), 2)
cv2.imwrite('/home/mis/Text_Recognition/amit.jpg', gray_img) #Saving

现在，我想识别文本框，并删除/取消识别发票上的任何非文本区域。我是 OpenCV 的新手，也是 Python 的初学者。我可以在 MATAB example 中找到一些示例和 C++ example ，但是如果我将它们转换为python，对我来说会花费很多时间。

有没有使用 OpenCV 的 python 示例，或者任何人都可以帮助我吗？

Answer 1

下面是代码

# Import packages 
import cv2
import numpy as np

#Create MSER object
mser = cv2.MSER_create()

#Your image path i-e receipt path
img = cv2.imread('/home/rafiullah/PycharmProjects/python-ocr-master/receipts/73.jpg')

#Convert to gray scale
gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)

vis = img.copy()

#detect regions in gray scale image
regions, _ = mser.detectRegions(gray)

hulls = [cv2.convexHull(p.reshape(-1, 1, 2)) for p in regions]

cv2.polylines(vis, hulls, 1, (0, 255, 0))

cv2.imshow('img', vis)

cv2.waitKey(0)

mask = np.zeros((img.shape[0], img.shape[1], 1), dtype=np.uint8)

for contour in hulls:

    cv2.drawContours(mask, [contour], -1, (255, 255, 255), -1)

#this is used to find only text regions, remaining are ignored
text_only = cv2.bitwise_and(img, img, mask=mask)

cv2.imshow("text only", text_only)

cv2.waitKey(0)