• opencv-python 车牌检测和识别


    首先利用级联分类器把车牌位置找到取出来,然后用ocr进行车牌识别。

    1 OCR之Tesseract安装

    Tesseract安装可以参考这个链接: https://blog.csdn.net/m0_53192838/article/details/127432761 

    写的比较详细,我在使用的时候有一个报错有点意思,记录一下:

     Tesseract ocr识别报错:tesseract is not installed or it‘s not in your PATH

    已经安装好tesseract,python中的pytesseract也装好了,但是代码里面用pytesseract的时候报错了,看起来是路径有问题,但是环境变量是已经配置好了的。

    网上分析是pytesseract.py文件里的路径有问题。

    把文件中的路径 tesseract_cmd = ‘tesseract’ 改为本地的绝对路径就行

    tesseract_cmd = r ’D\Tesseract_ocr\tesseract.exe’ 

     

    2 车牌检测和识别

    网上找了三幅带有车牌的图片,肉眼看起来都比较清晰,作为此次车牌识别的原图。

     

    首先用opencv的级联分类器把车牌提取出来,然后可以进行适当的形态学操作方便ocr更好的识别,然后直接用pytesseract进行识别就行了。

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    import cv2
    import numpy as np
    import pytesseract
     
    #创建级联分类器
    car = cv2.CascadeClassifier('./haarcascade_russian_plate_number.xml')
     
    img = cv2.imread('./car1.jpg')
    gray = cv2.cvtColor(img,cv2.COLOR_BGR2GRAY)
     
    kernel = cv2.getStructuringElement(cv2.MORPH_RECT,(3,3)) #形态学结构元
     
    car_nums = car.detectMultiScale(gray) #车牌检测(检测出来的框偏大)
     
    for car_num in car_nums:
        (x,y,w,h) = car_num
        cv2.rectangle(img,(x,y),(x+w,y+h),[0,0,255],2#用矩形把车牌框起来
        roi = gray[y:y+h,x:x+w]  #把车牌图片提取出来
         
        _,roi_thresh = cv2.threshold(roi,0,255,cv2.THRESH_BINARY | cv2.THRESH_OTSU) #对提取的车牌二值化
         
        open_img = cv2.morphologyEx(roi_thresh,cv2.MORPH_OPEN,kernel)  #形态学开操作(二值化后效果还是差点)
         
        cv2.imshow('open_img',open_img)
         
        print(pytesseract.image_to_string(open_img,lang='chi_sim+eng',config='--psm 7 --oem 3')) # 进行ocr识别
         
    cv2.imshow('car',img)
     
    cv2.waitKey(0)
    cv2.destroyAllWindows() 

     识别结果如下:

      

     

     

     

     总体来说,效果都不是很好(第三个车牌识别失败),还可以进行其他形态学操作尝试,还有部分原因是车牌框太大了,干扰比较多。

    通过观察,车牌的颜色都比较固定,且和车身差距比较大,可以用之前的颜色mask方法来提取车牌(形态学操作--小狗提取优化),然后进行适当形态学操作,再进行轮廓和轮廓外接矩形的计算,然后再提取车牌,这样提取的车牌框应该会更准确一些。

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    import cv2
    import numpy as np
    import pytesseract
      
    img = cv2.imread('./car2.jpg')
    gray = cv2.cvtColor(img,cv2.COLOR_BGR2GRAY)
    # print(img.shape)
    HSV = cv2.cvtColor(img, cv2.COLOR_BGR2HSV) #转换到hsv空间
     
    kernel = cv2.getStructuringElement(cv2.MORPH_RECT,(3,3)) #形态学结构元
     
    LowerBlue = np.array([90, 190, 100])  #检测hsv的上下限(蓝色车牌)
    UpperBlue = np.array([130, 230, 200])
      
    #inRange 函数将颜色的值设置为 1,如果颜色存在于给定的颜色范围内,则设置为白色,如果颜色不存在于指定的颜色范围内,则设置为 0
    mask = cv2.inRange(HSV,LowerBlue,UpperBlue) #车牌mask
    cv2.imshow('mask',mask)
     
    dilate = cv2.morphologyEx(mask,cv2.MORPH_DILATE,kernel,iterations=4) #形态学膨胀和开操作把提取的蓝色点连接起来
    morph = cv2.morphologyEx(dilate,cv2.MORPH_CLOSE,kernel,iterations=6)
    cv2.imshow('morph',morph)
     
    _,contours,_ = cv2.findContours(morph,cv2.RETR_EXTERNAL,cv2.CHAIN_APPROX_SIMPLE) #找车牌的轮廓,只找外轮廓就行
     
    # print(len(contours))
    img_copy = img.copy()
    cv2.drawContours(img_copy,contours,-1,[0,0,255],2) #把轮廓画出来
    cv2.imshow('img_copy',img_copy)
     
    rect = cv2.boundingRect(contours[0])  #用矩形把轮廓框出来(轮廓外接矩形)
    (x,y,w,h) = rect
    cv2.rectangle(img,(x,y),(x+w,y+h),[0,0,255],2)
    cv2.imshow('car',img)
     
    roi_img = gray[y:y+h,x:x+w]  #提取车牌区域进行ocr识别
     
    # _,roi_thresh = cv2.threshold(roi_img,0,255,cv2.THRESH_BINARY | cv2.THRESH_OTSU)
    # open_img = cv2.morphologyEx(roi_thresh,cv2.MORPH_OPEN,kernel)  #适当的形态学操作提高识别率
    # cv2.imshow('open_img',open_img)
     
    print(pytesseract.image_to_string(roi_img,lang='chi_sim+eng',config='--psm 8 --oem 3')) #ocr识别
     
    cv2.waitKey(0)
    cv2.destroyAllWindows()

     

     

     

     

     

     车牌框比较准确,识别效果相对好了不少,针对具体问题还可以继续微调形态学和 inRange 的范围参数,提高识别率。

     

  • 相关阅读:
    Android:事件分发机制(二)
    Java8 Stream流如何操作集合,一文带你了解!
    C++中的##、#符号含义
    软件流程和管理(四):PMP & Stakeholder Management
    虚拟机安装CentOS7教程
    程序员的护城河
    【VUE.JS】安装部署篇:验证开发环境:NODE+Express+VUE+WEBPACK
    adb-linux 调试桥
    ETH开源PPO算法学习
    工会排队奖励模式:企业家眼中的新机遇
  • 原文地址:https://www.cnblogs.com/libai123456/p/17618663.html