前言
本文将详细介绍如何使用C#、OpenCvSharp和PaddleOCR构建一个高效的车牌识别系统,适用于车辆管理、智慧停车和交通监控等多种应用场景。
车牌识别技术
车牌识别(License Plate Recognition, LPR)是计算机视觉领域的重要应用,通过图像处理和光学字符识别(OCR)技术,自动提取并识别车辆牌照上的字符信息。该技术广泛应用于智慧城市、智能交通管理和安防监控等领域。车牌识别的基本流程包括:
图像获取:从摄像头或视频流中捕获图像。
车牌定位:检测并定位图像中的车牌区域。
车牌预处理:对车牌区域进行预处理,如灰度化、二值化等。
字符分割:将车牌上的字符逐一分割出来。
字符识别:使用OCR技术识别分割出的字符。
技术栈
车牌识别系统主要基于以下技术:
OpenCvSharp4:用于图像处理的开源库。
OpenCvSharp4.Extensions:增强图像处理功能的扩展库。
OpenCvSharp4.runtime.win:Windows平台运行时支持。
PaddleOCRSharp:高精度OCR引擎,简化文字识别过程。
System.Drawing:用于图像绘制和展示结果。
基本流程
一个完整的车牌识别系统通常包含以下几个步骤:
图像采集:从摄像头或视频流中获取图像数据。
图像预处理:对图像进行必要的预处理操作,如缩放、去噪等。
车牌定位:检测并定位图像中的车牌区域。
字符分割:将车牌区域中的字符逐一分割。
字符识别:使用OCR技术识别分割出的字符。
结果输出:将识别结果输出或存储到数据库中。
完整代码
using System.Drawing;
using System;
using OpenCvSharp;
using Size = OpenCvSharp.Size;
using Rect = OpenCvSharp.Rect;
using Point = OpenCvSharp.Point;
namespaceAppLicensePlate
{
internalclassProgram
{
static void Main(string[] args)
{
DetectBlueRectangles("v2.jpg");
}
public static void DetectBlueRectangles(string imagePath)
{
using (Mat image = Cv2.ImRead(imagePath))
{
using (Mat hsvImage = new Mat())
{
Cv2.CvtColor(image, hsvImage, ColorConversionCodes.BGR2HSV);
Cv2.GaussianBlur(hsvImage, hsvImage, new Size(5, 5), 0);
// 调整HSV边界根据实际情况
Scalar lowerBlue = new Scalar(100, 70, 70); // 使用更具体的下边界
Scalar upperBlue = new Scalar(140, 255, 255); // 上边界保持不变
using (Mat blueMask = new Mat())
{
Cv2.InRange(hsvImage, lowerBlue, upperBlue, blueMask);
// 形态学操作:去噪
using (Mat kernel = Cv2.GetStructuringElement(MorphShapes.Rect, new Size(5, 5)))
{
Cv2.MorphologyEx(blueMask, blueMask, MorphTypes.Close, kernel);
Cv2.MorphologyEx(blueMask, blueMask, MorphTypes.Open, kernel);
}
// 查找轮廓
Cv2.FindContours(blueMask, out Point[][] contours, out HierarchyIndex[] hierarchy, RetrievalModes.External, ContourApproximationModes.ApproxSimple);
foreach (var contour in contours)
{
var approxContour = Cv2.ApproxPolyDP(contour, Cv2.ArcLength(contour, true) * 0.05, true);
if (approxContour.Length == 4)
{
Rect boundRect = Cv2.BoundingRect(approxContour);
// 计算区域面积
double area = Cv2.ContourArea(contour);
float aspectRatio = (float)boundRect.Width / boundRect.Height;
// 添加多个阈值条件
if (area > 1000 && aspectRatio >= 2 && aspectRatio <= 5)
{
// 在源图像中确认背景颜色是否偏离标准蓝色
Mat roi = new Mat(image, boundRect);
Scalar meanColor = Cv2.Mean(roi);
if (meanColor[0] > 60 && meanColor[1] < 100 && meanColor[2] < 100) // 检查蓝色分量是否占优
{
Cv2.Rectangle(image, boundRect, Scalar.Red, 2);
// 文字识别预处理
using (Mat grayRoi = new Mat())
{
Cv2.CvtColor(roi, grayRoi, ColorConversionCodes.BGR2GRAY);
Cv2.Threshold(grayRoi, grayRoi, 0, 255, ThresholdTypes.Otsu);
// 保存临时文件用于OCR识别
string tempImagePath = "temp_plate.png";
Cv2.ImWrite(tempImagePath, grayRoi);
var text = new PaddleOCRSharp.PaddleOCREngine().DetectText(tempImagePath).Text;
using (System.Drawing.Bitmap bitmap = new System.Drawing.Bitmap(image.Width, image.Height))
{
using (System.Drawing.Graphics g = System.Drawing.Graphics.FromImage(bitmap))
{
// 复制OpenCV图像到Bitmap
using (System.Drawing.Bitmap temp = OpenCvSharp.Extensions.BitmapConverter.ToBitmap(image))
{
g.DrawImage(temp, 0, 0);
}
// 设置文本样式
System.Drawing.Font font = new System.Drawing.Font("SimHei", 20, System.Drawing.FontStyle.Bold);
System.Drawing.Brush brush = System.Drawing.Brushes.Yellow;
System.Drawing.StringFormat format = new System.Drawing.StringFormat();
// 绘制带有背景的文本,提高可读性
System.Drawing.RectangleF rectF = new System.Drawing.RectangleF(
boundRect.X, boundRect.Y + boundRect.Height + 5, boundRect.Width, 40);
g.FillRectangle(System.Drawing.Brushes.Black, rectF);
g.DrawString(text, font, brush, rectF, format);
}
// 将Bitmap转换回OpenCV格式
using (Mat newImage = OpenCvSharp.Extensions.BitmapConverter.ToMat(bitmap))
{
newImage.CopyTo(image);
}
}
}
}
}
}
}
Cv2.ImShow("Blue Rectangle & Plate Text Detection", image);
Cv2.WaitKey(0);
Cv2.DestroyAllWindows();
}
}
}
}
}
}
注意:中文直接通过OpenCvSharp绘制显示有问题,不支持中文字符。
优化与实用技巧
HSV颜色空间调优
HSV颜色空间对于车牌识别非常重要,不同光照条件下可能需要调整参数:
形态学操作的核大小选择
形态学操作的核大小直接影响处理效果:
较小的核(3×3):保留更多细节,但可能无法有效去除噪点
较大的核(7×7或更大):噪点去除效果好,但可能导致细节丢失
根据图像分辨率和质量,可动态调整核大小:
车牌倾斜校正
在实际应用中,车牌可能存在一定的倾斜角度,可以通过以下方法校正:
自适应车牌定位参数
不同场景下的车牌特征可能有所不同,可以设计自适应参数调整机制:
总结
本文详细介绍了基于C#和OpenCVSharp实现车牌识别系统的完整过程。从图像预处理、车牌定位到字符识别,我们采用了一系列计算机视觉和图像处理技术。虽然示例中主要针对中国蓝色车牌,但通过调整相关参数,同样适用于其他类型车牌的识别。车牌识别技术正在各行各业发挥越来越重要的作用。
阅读原文:原文链接
该文章在 2025/3/21 10:40:16 编辑过