图像处理车牌识别系统设计实验报告书.docx

1、图像处理车牌识别系统设计实验报告书图像处理车牌识别系统设计实验报告书车牌识别系统的设计一、摘要 车牌是一辆汽车独一无二的信息，因此，对车辆牌照的识别技术可以作为辨识一辆车最为有效的方法。随着ITS(智能交通系统)的高速发展，对车牌识别技术的研究也随之发展。从根本上讲，牌照识别应用了先进的图像处理，模式识别，人工智能技术来获取，处理，解释，记录拍照的图像。目前， 汽车牌照的自动识别技术已经得到了广泛应用。汽车牌照自动识别整个处理过程分为预处理、边缘提取、车牌定位、字符分割、字符识别五大模块，其中字符识别过程主要由以下3个部分组成：正确地分割文字图像区域；正确的分离单个文字；正确识别单个字符。用M

2、ATLAB软件编程来实现每一个部分,最后识别出汽车牌照。在研究的同时对其中出现的问题进行了具体分析、处理。二、设计原理 车牌自动识别是一项利用车辆的动态视频或静态图像进行车牌、车牌颜色自动识别的模式识别技术。其核心包括车牌定位算法、车牌字符分割算法和字符识别算法等。 图1 牌照识别系统原理图主要研究容如下：1、车牌的定位研究。先进行图像的预处理，包括RGB彩色图像的灰度化、图像灰度拉伸、图像边缘检测、灰度图的二值化等;车牌定位采用基于水平和垂直投影分布特征的方法。2、字符分割的研究。先对定位后的车牌图像进行预处理，然后按照车牌的先验信息,用区域增长算法来确定候选车牌的字符区域。3、字符识别的研

3、究。对于提取出的单个字符，先进行归一化操作，再与给定的模板做对比，识别出字符。三、 详细设计步骤1. 车牌定位：车辆牌照识别整个系统主要是由车牌定位和字符识别两部分组成，其中车牌定位又可以分为图像预处理与边缘提取模块和牌照的定位；2. 流程图：1.1 图像的预处理为了用于牌照的分割和牌照字符的识别，原始图象应具有适当的亮度，较大的对比度和清晰可辩的牌照图象。但由于该系统的摄像部分工作于开放的户外环境，加之车辆牌照的整洁度、自然光照条件、拍摄时摄像机与牌照的矩离和角度以与车辆行驶速度等因素的影响，牌照图象可能出现模糊、歪斜和缺损等严重缺陷，因此需要对原始图象进行识别前的预处理。（1）一般的车牌识

4、别只对小对象进行移除，但是有时候因为拍照原因，即使对图像进行了很好的预处理，还是不能排除一些比较大的又和车牌比较相像的地方，例如图（1）中，车后面的玻璃窗仅仅进行灰度处理和形态学处理，平滑处理是无法排除其对车牌定位的影响的，因此需要对大对象移除（移除大对象前需对图像进行统一化-压缩）。图（1）实现的代码：img=image;I=img;x,y,z=size(img);if x2000|y2000 img=img(1:2:end,1:2:end,:); x,y,z=size(img);endhsi=rgb2hsi(img);for i=1:x for j=1:y if (hsi(i, j ,1)

5、=0.55&hsi(i, j, 2)0.4);%0.4 0. hsi(i, j,2)=0; hsi(i, j,3)=1; ; else hsi(i, j,2)=0; hsi(i, j,3)=0; end end endorigonImg=hsi2rgb(hsi);rgbnew=origonImg;（2）灰度校正： 由于牌照图象在拍摄时受到种种条件的限制和干扰，图象的灰度值往往与实际景物不完全匹配，这将直接影响到图象的后续处理。如果造成这种影响的原因主要是由于被摄物体的远近不同，使得图象中央区域和边缘区域的灰度失衡，或是由于摄像头在扫描时各点的灵敏度有较大的差异而产生图象灰度失真，或是由于曝光不

6、足而使得图像的灰度变化围很窄。这时就可以采用灰度校正的方法来处理，增强灰度的变化围、丰富灰度层次，以达到增强图象的对比度和分辨率。 灰度校正图 graynew=rgb2gray(rgbnew);（3）边缘检测： 边缘是指图像局部亮度变化显著的部分，是图像风、纹理特征提取和形状特征提取等图像分析的重要基础。所以在此我们要对图像进行边缘检测。图象增强处理对图象牌照的可辩认度的改善和简化后续的牌照字符定位和分割的难度都是很有必要实现代码：origonImg=hsi2rgb(hsi);rgbnew=origonImg; graynew=rgb2gray(rgbnew); graynew=imfill(

7、graynew,holes); for i=1:3 se1=1 1 1;1 1 1;1 1 1; graynew=imdilate( graynew,se1); se=1;1;1; graynew=imerode(graynew,se);% 腐蚀Imerode(X,SE).其中X是待处理的像，%SE是结构元素对象 graynew=getcenter(graynew);graynew=double(graynew);row col=size(graynew);1.2车牌定位牌照的定位是在经图象预处理后的原始灰度图象中确定牌照的具体位置，并将包含牌照字符的一块子图象从整个图象中分割出来，供字符识别

8、子系统识别之用。图为定位出的车牌实现代码：车牌裁剪：row col=size(graynew); colArray=zeros(row,1);for i=1:row for j=1:col if (graynew(i,j,1)=1) colArray(i,1)=colArray(i,1)+1; end endend maxcount maxIndex=max(colArray); roughY=maxIndex; while (colArray(roughY,1)=5)&(roughY1) roughY=roughY-1; endy1=roughY; roughY=maxIndex; whil

9、e (colArray(roughY,1)=5)&(roughY=5)&(roughX1) roughX=roughX-1; endx1=roughX; roughX=maxIndex; while (rowArray(1,roughX)=5)&(roughXcol) roughX=roughX+1; endx2=roughX;dw=img(y1:y2,x1:x2,:); greenframe=drawframe(img,y1,y2,x1,x2); imwrite(greenframe,imgAfterLocation/greenframe.jpg); imwrite(dw,imgAfterL

10、ocation/dw.jpg);2、字符分割：传统的字符分割方法有投影法、模板匹配法、聚类分析法。由于投影法比较准确、编程较简单，且易于实际操作，能满足在复杂环境下，所以我们采用的是投影法分割车牌字符。车牌分割总流程图：各部分代码实现和运行效果：2.1、对读入图像进行预处理操作I=imread(imgAfterLocation/dw.jpg);%读取图像I1 = rgb2gray(I);%彩色图像转化为灰度图像T=graythresh(I1);%找到灰度图像的阈值y,x,z=size(I1);%计算I1各维的大小Se=strel(disk,fix(y/45);%创建一个平坦的圆盘形结构元素I2

11、=imopen(I1,Se);%取圆盘形的开运算subplot(2,2,3);%图一的第三幅图imshow(I2),title(开运算后图像);Se=strel(diamond,fix(y/140);%创建一个平坦的菱形结构元素I3=imclose(I2,Se);%取菱形结构的闭运算I4=double(I3);%变为双精度2.2图像校正代码：bw1=edge(I1,sobel, horizontal);%用Sobel水平算子对图像边化figure,imshow(bw1)bw1=imcrop(bw1,0 0 500 100);%对图像进行剪切，保留图像的 %一条直线，减小运算量figure,im

12、show(bw1)theta=0:179;%定义theta角度围r=radon(bw1,theta);%对图像进行Radon变换figure,imshow(r)m,n=size(r);c=90;for i=1:mfor j=1:n if r(1,1)=30)&(Py02) Py0=Py0-1;%找到去除边框后上边的位置endwhile (Y1(Py1,1)=30)&(Py1=15)&(x1x) x1=x1+1;%找到去除边框后右边的位置 end i=i+1; while (X1(1,x1)15)&(x1x)&(i=5)&(x02) x0=x0-1;%从车牌的第一个字符开始寻找第一个字符间隙，找

13、到%去除边框左边的位置 end i=i+1; while (X1(1,x0)1)&i=2) x0=x0-1;%找到去除边框后左边的位置 end endendZ2=Z1(:,x0:x1,:);%将二值图像左右边框去除figure(5);imshow(Z2),title(将二值图像垂直边框去除后图像);2.5再次计算列方向的像素，用来去除车牌上的圆点代码：y,x,z=size(Z2);%计算此时图像的大小X1=zeros(1,x);for j=1:x for i=1:y if(Z2(i,j,1)=1) X1(1,j)= X1(1,j)+1;%计算I3第j列有几个一 end end End去除车牌中

14、的圆点：y,x,z=size(Z2);Z2=double(Z2);x1=fix(x*105/409);x2=fix(x*128/409);for i=1:y for j=x1:x2 Z2(i,j)=0; endendfigure(6);imshow(Z2),title(去除圆点后图像);2.6用投影法分割车牌，把分割出来的子图转成标准子图代码：用投影法分割Px0=1;Px1=1;y=fix(x*90/409);for i=1:7 while (X1(1,Px0)10)&(Px0=10)&(Px1x)|(Px1x)&(a/y)=3kmin=1; kmax=36;endindex=getFinal

15、Temp(kmin,kmax,codes,SegBw2,I);CarNum(l)=codes(index); l=l+1;end% xlabel(第三步：识别结果为: , CarNum,Color,b);getFinalTemp.m 程序代码（返回最终识别的单个字符index 下标）：function index=getFinalTemp(minIndex,maxIndex,codes,SegBw2,numIndex)if numIndex3 %后五位不能出现 i 、o 字母; for i=minIndex:maxIndex path=strcat(template/, codes(i); %

16、调用 getFromLib 遍历文件夹找出同一字符最佳的模板 maxSame=getFromLib(path,SegBw2); near(i)= maxSame; % 记录下字符与模板i同的点个数 endelse for i=minIndex:maxIndex% if i=find(codes=l)&i=find(codes=O if codes(i)=l&codes(i)=O path=strcat(template/, codes(i); %调用 getFromLib 遍历文件夹找出同一字符最佳的模板 maxSame=getFromLib(path,SegBw2); near(i)= ma

17、xSame; % 记录下字符与模板i同的点个数 end endendnearest=max(near); % 差别最小的，不同字符模板index=find(near=nearest); % 找出差别最小的模板的下标getFromLib.m 程序代码（遍历单个字符模板库，返回最佳的模板）：function maxSame=getFromLib(path,carNum) files=dir(path /*.jpg); for i=1:length(files) file=imread(path / num2str(i) .jpg ); if islogical(file)=0 filebw=im2

18、bw(file); else filebw=file; end subImg=carNum-filebw; % 以上相当于两幅图相减得到第三幅图 进行匹配 sameDots=subImg=0; % 记录下字符与模板一样的点个数 sumDots=sum(sameDots(:); arr(i)=sumDots; end maxSame=max(arr);4、系统界面的实现：界面我们小组一共分有了两个模块：一个是父模块车牌识别系统，进行显图，定位，分割和识别的操作；另一个是子模块是字符模块，是为了增加字符的模块进库，提高车牌的识别效率。父模块车牌识别系统图一界面分别有载入图片，车牌定位，车牌分割，车

19、牌识别和增加字符模块五个按钮，每个按钮对应不同的功能。载入车牌：选择你需要识别的带有车牌的图片并显示出来在原始图片的位置。车牌定位：部进行定位函数对车牌进行定位，并在原图上用黄线圈出车牌相应的位置。车牌分割：将定位好的车牌进行分割，分割出7个独立的字符模块。车牌识别：对每个分割出来的字符进行识别，并文本输出来。增加字符模块：点击进入子界面，进行字符模块的增加，提高车牌识别的效率。效果如下图：图二子模块字符模块图三字符模块分为5大部分，分别是车牌显示，选择添加模板的位置，选择要添加的模板，添加字符模块和显示字符模块。车牌显示：将刚在父模块里车牌分割出来的图片显示在这个对应的位置上。选择添加模板的位置：选择你需要添加的字符在图片对应的位置，如“粤”在第一位就选择“1”。选择要添加的模板：选择你需要添加进库的字符对应的数字，字母或者文字，如要添加第一位“粤”字就选择粤“粤”字。添加字符模板：当你选择好“选择添加模板的位置”和“选择要添加的模板”后，就可以按这个按钮确认了。如图四显示字符模块：添加成功后你就可以点击这个按钮查看对应的某字符的字符模板库里的所有“粤”字模板了。如图五图四图五四、设计结果分析从上面结果看车牌识别成功，但有一些车牌