著录项信息
专利名称 | 基于多角度投影的模糊车牌识别方法 |
申请号 | CN200910035484.2 | 申请日期 | 2009-10-09 |
法律状态 | 权利终止 | 申报国家 | 中国 |
公开/公告日 | 2010-03-17 | 公开/公告号 | CN101673338 |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | G06K9/00 | IPC分类号 | G;0;6;K;9;/;0;0;;;G;0;8;G;1;/;0;1;7查看分类表>
|
申请人 | 南京树声科技有限公司 | 申请人地址 |
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | 南京树声科技有限公司,江苏泛德科技有限公司 | 当前权利人 | 南京树声科技有限公司,江苏泛德科技有限公司 |
发明人 | 王崇俊;谈晶晶;蔡圣闻;于明龙 |
代理机构 | 南京天翼专利代理有限责任公司 | 代理人 | 陈建和 |
摘要
基于多角度投影的模糊车牌识别方法,主要包括如下步骤:1)图像预处理阶段;2)车牌字符分割阶段:a)将切割出来的图像灰度化;b)沿车牌边缘切割出只包含车牌的图像;c)将车牌图像上的每个字符沿着其边缘切割;3)字符识别阶段:a)通过多角度投影提取每个待识别字符图像的特征;b)生成比切割的字符稍大的字符图像;c)选定最佳位置,切割出该位置的字符图像,同时提其多角度投影特征(标准字符图像);d)识别字符。本发明基于多角度投影的模糊车牌识别方法,在图像质量比较差、肉眼难以辨识车牌的情况下,通过多角度投影提取车牌字符特征,最终给出与0~9、A~Z共36个字符的相似程度。
1.基于多角度投影的模糊车牌识别方法,其特征是包括如下步骤:
车牌图像字符预处理:
步骤1通过数字图像处理的方法,去除图像中的噪声;
步骤2从预处理后的图像中切割出完全包含车牌部分的图像;
步骤3检测出车牌的倾斜角度,通过旋转图像使其变成水平方向;
在车牌字符分割阶段:
步骤4将经过预处理阶段的图像灰度化;
步骤5确定车牌的精确上下和左右边界,按照找到的上下左右边界,沿着车牌边缘切割出只包含车牌的字符图像;
步骤6参照车牌图像和其水平和垂直投影的柱状图,将车牌图像切割成一个个待识别字符图像;字符识别阶段:
步骤7对每个待识别字符图像,依次计算其水平投影、垂直投影、左上到右下投影、左下到右上投影,以充分提取该字符的特征;
步骤8生成稍大标准字符图像,首先离散化实际的车牌,然后缩小成为摄像机能够成像的最大尺寸,最后再缩放成为比待识别字符稍微大点的尺寸,以便于由于寻找待识别字符在稍大标准字符上的精确位置,减少切割带来的位置误差;
步骤9是在稍大标准字符上找到和待识别字符最相似的位置,切割出标准字符图像;
提取标准字符的多角度投影特征;
步骤10是根据选定的方法识别字符;
步骤11是本发明的基于多角度投影的模糊车牌识别方法的结束步骤;
步骤1中具体过程如下:
111)如果车牌图像比较模糊,通过多帧融合技术,合成一幅比较清晰的图像;
112)对该图像进行平滑滤波操作,去除噪音,增强车牌的特征;
步骤3中的具体过程如下:
131)通过Hough变换方法,计算出车牌的倾斜角度;
132)旋转图像,从而使车牌变为水平方向;
步骤5和步骤6中具体过程如下:
221)对灰度化以后的图像进行水平投影、垂直投影;
222)根据水平投影、垂直投影画出柱状图;
223)从柱状图中找到波峰或波谷,即为车牌的边缘可能的地方,同时参照车牌图像,尽量沿着车牌边缘精确切割出只包含车牌的那部分图像;
231)对切割出来的车牌图像进行水平投影、垂直投影;
232)根据水平、垂直投影画出柱状图;
233)从柱状图中找到波谷,由于车牌中字符颜色和背景颜色有明显区别,波谷可能为两个字符之间的空隙;参照车牌图像,尽量沿着每个字符的笔画边缘,将其切分出来,得到待识别字符;
步骤7-11中具体过程如下:
311)对于每个待识别字符,分别做水平投影、垂直投影、左上到右下的投影、左下到右上的投影,能更充分地提取字符的特征;其中从左上到右下的投影共选取三条,分别是左上角到右边界中点、左上角到右下角、左上角到下边界中点;从左下到右上的投影也选取了三条,依次为左下角到上边界的中点、左下角到右上角、左下角到右边界的中点;
321)根据实际车牌的尺寸大小和摄像机或者照相机的分辨率,单位为像素/英寸,计算出表示实际的车牌需要的像素个数,再按照真实的比例折算出一个字符需要的像素个数;然后根据车牌字体,从A~Z、0~9依次生成符合实际车牌的比例的离散化车牌字符图像;
322)将离散的车牌字符图像缩放小为照相机或者摄像头所能拍摄的最大图像的大小;
该步骤是模拟了相机的成像原理,将生成的图像模糊化,更逼近车牌图像的效果;
323)将322)中得到的图像再次缩放成为比切割出来的字符图像稍大的图像,即稍大标准字符图像;由于模糊车牌识别方法一般面对的车牌图像都是十分小并且很模糊的,很难保证从车牌图像中切割出来的待识别字符在整个车牌中的位置与生成的字符图像在整个车牌中的位置相同,因此先缩小成稍大的字符图像,然后再寻找最佳位置;高和宽各稍大几个像素即可;
324)选定一种灰度拉伸方法,将稍大标准字符图像的灰度拉伸为与待识别字符的灰度分布相似;通过最值拉伸灰度与通过图像平均值、标准差拉伸灰度;
331)采用一种通过比较投影而判断两个图像相似度的方法,用于比较待识别字符图像与稍大标准字符图像:通过计算欧式距离来比较图像相似度或通过计算投影相关系数来比较图像相似度;计算欧式距离公式为:
其中Pa、Pb为两个图像的投影,N为投影的大小;i表示投影的
序号;
332)求取稍大标准字符的水平投影、垂直投影,依次分割出与待识别字符图像的水平、垂直投影大小相同的投影,利用331)中选定的方法比较与待识别字符图像的相似度,找出最相似的位置;
333)根据找到的最相似位置,切割出标准字符图像;
334)计算标准字符图像的水平投影、垂直投影、从左上到右下的投影、从左下到右上的投影;
341)根据331)选定的方法,将生成的A~Z、0~9的标准字符图像的四种投影依次和待识别字符的四种投影比较,记录得到的相似度;
342)将相似度结果排序,得到识别的结果。
基于多角度投影的模糊车牌识别方法\n技术领域\n[0001] 本发明涉及一种模糊车牌识别方法,尤其涉及一种基于多角度图像投影的模糊车牌识别方法。\n背景技术\n[0002] 车辆牌号是唯一对车辆身份识别的标记,我国已经推广的汽车车牌是目前应用最广泛、最有效、最有权威的车牌标志,在对车辆的管理上起到了无可替代的作用。传统的车牌识别主要是应用于智能交通系统中,对交通路口、停车场等场合拍摄的比较清晰的视频图像进行自动地处理、分析和识别。然而现实生活中经常出现由于照相机或摄像头分辨率不够高、拍摄距离过远等多种因素干扰,使得拍摄出来的画面不够清晰,车牌部分小而模糊等现象,甚至连人的肉眼都难以区分,导致常规的车牌识别方法难以发挥功效。但是如果能够识别出该类模糊车牌,其意义将是巨大的,特别是对交通逃逸事故乃至刑事案件的侦破等都具有意义。\n[0003] 模糊车牌识别的研究为解决这类问题提供了一种较好的途径。一般的车牌识别由于都是针对近距离清晰车牌图片,提取的特征不充分即可满足要求;同时由于其分类特征是人为规定好以后就不会改变的,难以完全描述每个字符之间的差异。基于多角度投影的模糊车牌识别方法使用水平、垂直、左上角到右下角、左下角到右上角等多角度的投影,更充分地提取各个字符的特征的同时,根据待识别字符的大小、摄像头分辨率等因素动态地生成标准的字符,动态地提取标准字符的特征并通过多种方法进行比较,在一定程度上解决了模糊车牌的识别问题。\n发明内容\n[0004] 本发明的目的是:提供一种基于多角度投影的模糊车牌识别方法,以提高识别精度,在一定程度上能够识别模糊车牌。\n[0005] 本发明的技术方案是:基于多角度投影的模糊车牌识别方法包括如下步骤:\n[0006] 车牌字符预处理:\n[0007] 步骤1通过数字图像处理的方法,去除图像中的噪声,使车牌部分更加清晰;\n[0008] 步骤2从预处理后的图像中大致切割出完全包含车牌部分的图像;\n[0009] 步骤3检测出车牌的倾斜角度,通过旋转图像使其变成水平方向。\n[0010] 在车牌字符分割阶段(步骤4-6):\n[0011] 步骤4将经过预处理阶段的图像灰度化;\n[0012] 步骤5确定车牌的精确上下边界,按照找到的上下左右边界,沿着车牌边缘切割出只包含车牌的车牌图像;\n[0013] 步骤6参照车牌图像和其投影的柱状图,将车牌图像切割成一个个待识别字符图像。\n[0014] 在字符识别阶段(步骤7-10):\n[0015] 步骤7对每个待识别字符图像,依次计算其水平投影、垂直投影、左上到右下投影、左下到右上投影,以充分提取该字符的特征;\n[0016] 步骤8生成稍大标准字符。首先离散化实际的车牌,然后缩小成为摄像机能够成像的最大尺寸,最后再缩放成为比待识别字符稍微大点的尺寸,以便于由于寻找待识别字符在稍大标准字符上的精确位置,减少切割带来的位置误差;\n[0017] 步骤9是在稍大标准字符上找到和待识别字符最相似的位置,切割出标准字符图像;\n[0018] 步骤10是根据选定的方法识别字符。\n[0019] 步骤11是本发明的基于多角度投影的模糊车牌识别方法的结束步骤。\n[0020] 1)图像预处理阶段:\n[0021] 11)去除噪音、增强车牌中字符的特征;\n[0022] 12)从整幅图像中大致切割出完全包含车牌部分的图像;\n[0023] 13)矫正车牌方向;\n[0024] 14)结束;\n[0025] 2)车牌字符分割阶段:\n[0026] 21)将切割出来的图像灰度化;\n[0027] 22)沿车牌边缘切割出车牌图像;\n[0028] 23)将车牌图像上的每个字符沿着其边缘切割,得到待识别字符图像;\n[0029] 24)结束;\n[0030] 3)字符识别阶段:\n[0031] 31)通过多角度投影提取每个待识别字符的特征;\n[0032] 32)生成比待识别字符稍大的稍大标准字符图像;\n[0033] 33)选定最佳位置,切割出标准字符,提取标准字符的多角度投影特征;\n[0034] 34)识别字符;\n[0035] 35)结束。\n[0036] 其中:\n[0037] 步骤11)的具体过程如下:\n[0038] 111)如果车牌图像比较模糊,可以通过多帧融合等技术,合成一幅比较清晰的图像;\n[0039] 112)对该图像进行平滑滤波等操作,去除噪音,增强车牌的特征;\n[0040] 步骤13)的具体过程如下:\n[0041] 131)通过Hough变换等方法,计算出车牌的倾斜角度;\n[0042] 132)旋转图像,从而使车牌变为水平方向。\n[0043] 步骤22)的具体过程如下:\n[0044] 221)对灰度化以后的图像进行水平投影、垂直投影;\n[0045] 222)根据水平投影、垂直投影画出柱状图;\n[0046] 223)从柱状图中找到波峰或波谷,即为车牌的边缘可能的地方,同时参照车牌图像,尽量沿着车牌边缘精确切割出只包含车牌的那部分图像。\n[0047] 步骤23)的具体过程如下:\n[0048] 231)对切割出来的车牌图像进行水平投影、垂直投影;\n[0049] 232)根据水平、垂直投影画出柱状图;\n[0050] 233)从柱状图中找到波谷,由于车牌中字符颜色和背景颜色有明显区别,波谷可能为两个字符之间的空隙;参照车牌图像,尽量沿着每个字符的笔画边缘,将其切分出来,得到待识别字符。\n[0051] 步骤31)的具体过程如下:\n[0052] 311)对于每个待识别字符,分别做水平投影、垂直投影、左上到右下的投影、左下到右上的投影,以能够更充分地提取字符的特征;其中从左上到右下的投影如下图所示,共选取三条,分别是左上角到右边界中点、左上角到右下角、左上角到下边界中点;从左下到右上的投影也如图7所示,也选取了三条,依次为左下角到上边界的中点、左下角到右上角、左下角到右边界的中点。\n[0053] 步骤32)的具体过程如下,说明书附图3中有其详细流程图。\n[0054] 321)根据实际车牌的尺寸大小和摄像机或者照相机的分辨率(单位为像素/英寸),计算出表示实际的车牌需要的像素个数,再按照真实的比例折算出一个字符需要的像素个数;然后根据车牌字体,从A~Z、0~9依次生成符合实际车牌的比例的离散化车牌字符图像。\n[0055] 322)将离散的车牌字符图像缩放小为照相机或者摄像头所能拍摄的最大图像的大小(一般摄像头为640*480);该步骤是模拟了相机的成像原理,将生成的图像模糊化,更逼近车牌图像的效果;\n[0056] 323)将322)中得到的图像再次缩放成为比切割出来的字符图像稍大的图像,即稍大标准字符图像;由于模糊车牌识别方法一般面对的车牌图像都是十分小并且很模糊的,很难保证从车牌图像中切割出来的待识别字符在整个车牌中的位置与生成的字符图像在整个车牌中的位置相同,因此先缩小成稍大的字符图像,然后再寻找最佳位置。一般情况下,高和宽各稍大几个像素即可。\n[0057] 324)选定一种灰度拉伸方法,将稍大标准字符图像的灰度拉伸为与待识别字符的灰度分布相似。本发明中使用两种灰度拉伸方法:通过最值拉伸灰度与通过图像平均值、标准差拉伸灰度。灰度拉伸方法的详细说明参见说明书附图的图4、图5以及附图说明中相应部分。\n[0058] 步骤33)的具体过程如下:\n[0059] 331)选定一种通过比较投影而判断两个图像相似度的方法,用于比较待识别字符图像与稍大标准字符图像。本发明中提供两种方法:通过计算欧式距离来比较图像相似度和通过计算投影相关系数来比较图像相似度。计算欧式距离公式为:\n[0060] 其中Pa、Pb为两个图像的投影,N为投影的大小。\n[0061] 计算投影相关系数的方法参见说明书附图的图6及附图说明中的相应部分。\n[0062] 332)求取稍大标准字符的水平投影、垂直投影,依次分割出与待识别字符图像的水平、垂直投影大小相同的投影,利用331)中选定的方法比较与待识别字符图像的相似度,找出最相似的位置;\n[0063] 333)根据找到的最相似位置,切割出标准字符图像;\n[0064] 334)计算标准字符图像的水平投影、垂直投影、从左上到右下的投影、从左下到右上的投影。\n[0065] 步骤34)的具体过程如下:\n[0066] 341)根据331)选定的方法,将生成的A~Z、0~9的标准字符图像的四种投影依次和待识别字符的四种投影比较,记录得到的相似度。\n[0067] 342)将相似度结果排序,得到识别的结果。\n[0068] 本发明的有益结果是:本发明的基于多角度投影的模糊车牌识别方法能够在车牌图像比较模糊,以致人眼无法区分的情况下,进行车牌识别,在一定程度上能够识别模糊车牌。\n附图说明:\n[0069] 图1为车牌识别系统工作流程图;\n[0070] 图2为基于多角度投影的模糊车牌识别方法的流程图;\n[0071] 图3为生成稍大标准字符,选定标准字符;\n[0072] 图4为通过最值拉伸灰度的流程图;\n[0073] 图5为通过图像平均值、标准差进行灰度拉伸的流程图;\n[0074] 图6为通过计算投影相关系数来比较图像相似度的流程图;\n[0075] 图7为左上到右下的三条投影和左下到右上的三条投影的示意图[0076] 图8为切割出完全包含车牌的部分,然后矫正车牌、灰度化的结果图像[0077] 图9为经过缩放、灰度拉伸,得到数字9的稍大标准图像\n具体实施方式\n[0078] 下面结合附图对本发明进行详细说明:\n[0079] 如图1所示,车牌识别系统首先通过摄像头或照相机等图像采集设备获取包含车牌的图像,然后进行去噪、增强特征等预处理,接着进行车牌字符分割、特征提取、字符识别等车牌识别操作,最后输出识别结果。\n[0080] 由于针对的车牌图像通常小而且模糊,因此车牌识别操作的任何一步都可能对结果产生很大影响。本发明的主要思路是:通过投影来支持车牌字符的精确分割;通过提取更充分的特征、利用更精确的比较方法来识别字符,最终达到识别出模糊车牌的目的。本发明的基于多角度投影的模糊车牌识别方法的工作流程如图2所示。\n[0081] 1)图像预处理阶段:\n[0082] 15)去除噪音、增强车牌中字符的特征;\n[0083] 16)从整幅图像中大致切割出完全包含车牌部分的图像;\n[0084] 17)矫正车牌方向;\n[0085] 18)结束;\n[0086] 2)车牌字符分割阶段:\n[0087] 25)将切割出来的图像灰度化;\n[0088] 26)沿车牌边缘切割出车牌图像;\n[0089] 27)将车牌图像上的每个字符沿着其边缘切割,得到待识别字符图像;\n[0090] 28)结束;\n[0091] 3)字符识别阶段:\n[0092] 36)通过多角度投影提取每个待识别字符的特征;\n[0093] 37)生成比待识别字符稍大的稍大标准字符图像;\n[0094] 38)选定最佳位置,切割出标准字符,提取标准字符的多角度投影特征;\n[0095] 39)识别字符;\n[0096] 310)结束。\n[0097] 其中:\n[0098] 步骤11)的具体过程如下:\n[0099] 111)如果车牌图像比较模糊,可以通过多帧融合等技术(能否细化一些?),合成一幅比较清晰的图像;\n[0100] 112)对该图像进行平滑滤波等操作,去除噪音,增强车牌的特征;\n[0101] 步骤13)的具体过程如下:\n[0102] 131)通过Hough变换等方法,计算出车牌的倾斜角度;\n[0103] 132)旋转图像,从而使车牌变为水平方向。\n[0104] 步骤22)的具体过程如下:\n[0105] 221)对灰度化以后的图像进行水平投影、垂直投影;\n[0106] 222)根据水平投影、垂直投影画出柱状图;\n[0107] 223)从柱状图中找到波峰或波谷,即为车牌的边缘可能的地方,同时参照车牌图像,尽量沿着车牌边缘精确切割出只包含车牌的那部分图像。\n[0108] 步骤23)的具体过程如下:\n[0109] 231)对切割出来的车牌图像进行水平投影、垂直投影;\n[0110] 232)根据水平、垂直投影画出柱状图;\n[0111] 233)从柱状图中找到波谷,由于车牌中字符颜色和背景颜色有明显区别,波谷可能为两个字符之间的空隙;参照车牌图像,尽量沿着每个字符的笔画边缘,将其切分出来,得到待识别字符。\n[0112] 步骤31)的具体过程如下:\n[0113] 311)对于每个待识别字符,分别做水平投影、垂直投影、左上到右下的投影、左下到右上的投影,以能够更充分地提取字符的特征;其中从左上到右下的投影如图7所示,共选取三条,分别是左上角到右边界中点、左上角到右下角、左上角到下边界中点;从左下到右上的投影也如下图所示,也选取了三条,依次为左下角到上边界的中点、左下角到右上角、左下角到右边界的中点。\n[0114] 步骤32)的具体过程如下,说明书附图3中有其详细流程图。\n[0115] 321)根据实际车牌的尺寸大小和摄像机或者照相机的分辨率(单位为像素/英寸),计算出表示实际的车牌需要的像素个数,再按照真实的比例折算出一个字符需要的像素个数;然后根据车牌字体,从A~Z、0~9依次生成符合实际车牌的比例的离散化车牌字符图像。\n[0116] 322)将离散的车牌字符图像缩放小为照相机或者摄像头所能拍摄的最大图像的大小(一般摄像头为640*480);该步骤是模拟了相机的成像原理,将生成的图像模糊化,更逼近车牌图像的效果;\n[0117] 323)将322)中得到的图像再次缩放成为比切割出来的字符图像稍大的图像,即稍大标准字符图像;由于模糊车牌识别方法一般面对的车牌图像都是十分小并且很模糊的,很难保证从车牌图像中切割出来的待识别字符在整个车牌中的位置与生成的字符图像在整个车牌中的位置相同,因此先缩小成稍大的字符图像,然后再寻找最佳位置。一般情况下,高和宽各稍大几个像素即可。\n[0118] 324)选定一种灰度拉伸方法,将稍大标准字符图像的灰度拉伸为与待识别字符的灰度分布相似。本发明中使用两种灰度拉伸方法:通过最值拉伸灰度与通过图像平均值、标准差拉伸灰度。灰度拉伸方法的详细说明参见说明书附图的图4、图5以及附图说明中相应部分。\n[0119] 步骤33)的具体过程如下:\n[0120] 331)选定一种通过比较投影而判断两个图像相似度的方法,用于比较待识别字符图像与稍大标准字符图像。本发明中提供两种方法:通过计算欧式距离来比较图像相似度和通过计算投影相关系数来比较图像相似度。计算欧式距离公式为:\n[0121] 其中Pa、Pb为两个图像的投影,N为投影的大小。\n[0122] 计算投影相关系数的方法参见说明书附图的图6及附图说明中的相应部分。\n[0123] 332)求取稍大标准字符的水平投影、垂直投影,依次分割出与待识别字符图像的水平、垂直投影大小相同的投影,利用331)中选定的方法比较与待识别字符图像的相似度,找出最相似的位置;\n[0124] 333)根据找到的最相似位置,切割出标准字符图像;\n[0125] 334)计算标准字符图像的水平投影、垂直投影、从左上到右下的投影、从左下到右上的投影。\n[0126] 步骤34)的具体过程如下:\n[0127] 341)根据331)选定的方法,将生成的A~Z、0~9的标准字符图像的四种投影依次和待识别字符的四种投影比较,记录得到的相似度。\n[0128] 342)将相似度结果排序,得到识别的结果。\n[0129] 步骤0为本发明的模糊车牌识别的起始状态;\n[0130] 在图像预处理阶段(步骤1-3):\n[0131] 步骤1通过一些数字图像处理的方法,去除图像中的噪声,使车牌部分更加清晰;\n[0132] 步骤2从预处理后的图像中大致切割出完全包含车牌部分的图像;\n[0133] 步骤3检测出车牌的倾斜角度,通过旋转图像使其变成水平方向。\n[0134] 在车牌字符分割阶段(步骤4-6):\n[0135] 步骤4将经过预处理阶段的图像灰度化;\n[0136] 步骤5确定车牌的精确上下边界,按照找到的上下左右边界,沿着车牌边缘切割出只包含车牌的车牌图像;\n[0137] 步骤6参照车牌图像和其投影的柱状图,将车牌图像切割成一个个待识别字符图像。\n[0138] 在字符识别阶段(步骤7-10):\n[0139] 步骤7对每个待识别字符图像,依次计算其水平投影、垂直投影、左上到右下投影、左下到右上投影,以充分提取该字符的特征;\n[0140] 步骤8生成稍大标准字符。首先离散化实际的车牌,然后缩小成为摄像机能够成像的最大尺寸,最后再缩放成为比待识别字符稍微大点的尺寸,以便于由于寻找待识别字符在稍大标准字符上的精确位置,减少切割带来的位置误差;\n[0141] 步骤9是在稍大标准字符上找到和待识别字符最相似的位置,切割出标准字符图像;\n[0142] 步骤10是根据选定的方法识别字符。\n[0143] 步骤11是本发明的基于多角度投影的模糊车牌识别方法的结束步骤。\n[0144] 图3是对图2中步骤8-9的详细描述。\n[0145] 步骤30为起始步骤;\n[0146] 步骤31离散化实际的车牌,生成车牌字符。由于各种型号的车牌的尺寸是由国家统一规定的,根据摄像头或者照相机的分辨率(像素/英寸),就可以计算出来可以用多少个像素来表示实际的车牌,再根据比例,就可以计算出来每个车牌字符在其中所占的像素个数。通过车牌字体,就可以模拟出标准的车牌字符。\n[0147] 步骤32将模拟的车牌字符缩放成为摄像头或者照相机所能成像的最大尺寸。该步骤模拟相机成像原理,考虑相机成像时的模糊效果,将标准字符模糊化,尽量逼近真实效果。\n[0148] 步骤33将步骤32所得的结果再次缩放成为比待识别字符稍大的稍大标准字符。\n该步骤同样是考虑了相机成像的原理,再次对生成的标准字符模糊化。由于一般面临的情况都是待识别字符小且模糊,边缘难以区分,不能保证切割出来的待识别字符在实际车牌中的位置正好是我们生成的字符在整个车牌中的位置,因此该步骤我们考虑该步骤中先缩放成稍大的字符图像,然后在稍大图像中确定待识别字符的最佳位置。\n[0149] 步骤34选定一种灰度拉伸方法,将稍大标准字符图像的灰度拉伸为与待识别字符的灰度分布相似。本发明中使用两种灰度拉伸方法:通过最值拉伸灰度与通过图像平均值、标准差拉伸灰度。灰度拉伸方法的详细说明参见说明书附图的图4、图5以及附图说明中相应部分。\n[0150] 步骤35计算稍大标准字符的水平、垂直投影,从投影首项依次切割出和待识别字符的投影同样大小的部分;切割的次数视稍大标准字符比待识别字符大多少而定。\n[0151] 步骤36中首先选定比较的方法,然后依次比较步骤34中截取的图像投影和待识别字符图像的投影,记录二者的相似度;\n[0152] 步骤37检查从稍大标准字符图像投影中截取投影与待识别字符图像的投影比较的过程是否结束,如果结束则转到步骤37,否则继续执行步骤34;\n[0153] 步骤38根据比较的结果,找到最相似的位置,切割出标准字符;\n[0154] 步骤39依次计算标准字符的水平投影、垂直投影、左上到右下的投影、左下到右上的投影;\n[0155] 步骤310为结束状态。\n[0156] 图4为灰度拉伸方法中利用最值进行灰度拉伸的流程图:\n[0157] 步骤40为起始步骤;\n[0158] 步骤41从待识别字符图像中寻找n个最大值,求其平均值MaxAve;n个最小值,求其平均值MinAve;\n[0159] 步骤42找出标准字符图像中的最大值max,最小值min;\n[0160] 步骤43将标准字符的最大值max设定为MaxAve,最小值min设定为MinAve,对标准图像进行线性灰度拉伸;\n[0161] 步骤44得到线性拉伸以后的灰度图像;\n[0162] 步骤45为结束状态。\n[0163] 图5是利用图像平均值、标准差进行灰度拉伸的流程图:\n[0164] 步骤50为起始步骤;\n[0165] 步骤51利用OSTU算法计算出待识别字符的阈值Threshold1。该算法使得计算出来的阈值将灰度图像分割为背景和前景两部分,并且两部分的方差最大。\n[0166] 步骤52利用OSTU算法计算出标准字符的阈值Threshold2。\n[0167] 步骤53计算待识别字符中小于OSTU阈值部分的平均值ave1,标准差diff1;大于OSTU阈值部分的平均值ave2,标准差diff2;\n[0168] 步骤54计算标准字符中小于OSTU阈值部分的平均值ave3,标准差diff3;大于OSTU阈值部分的平均值ave4,标准差diff4;\n[0169] 步骤55依次读取标准字符图像中的每个像素的灰度值gray;\n[0170] 步骤56如果gray小于Threshold2,则将其灰度进行公式1变换:\n[0171] (公式1)\n[0172] 步骤57如果gray大于Threshold2,则将其灰度进行公式2变换:\n[0173] (公式2)\n[0174] 步骤58检查所有像素是否读完,如果没有读完则执行步骤55;否则执行步骤59;\n[0175] 步骤59得到利用图像的平均值和标准差进行灰度拉伸以后的图像;\n[0176] 步骤510为结束状态。\n[0177] 图6是通过计算投影相关系数来比较图像相似度的流程图:\n[0178] 步骤60是起始步骤;\n[0179] 步骤61计算出需要比较的两个投影的平均值;\n[0180] 步骤62到65是计算投影的相关系数,相关系数越大,两个图像越相似。相关系数的计算公式为:\n[0181] \n[0182] 步骤66为结束状态。\n[0183] 实际应用举例:\n[0184] 有一为通过照相机拍摄的实际车牌照片,由于图像较大,只截取显示包含车牌的部分图像。由于拍摄距离较远,车牌部分比较模糊,肉眼难以辨别。其实际车牌号为“苏AFE558”。\n[0185] 在经过平滑、滤波等预处理后,切割出完全包含车牌的部分,然后矫正车牌、灰度化,结果图像如图8所示:\n[0186] 计算出该图像的水平、垂直投影,然后根据投影的柱状图的波谷,切割出车牌图像。\n[0187] 然后根据该图像的水平投影、垂直投影的波谷,依次切割出待识别字符。此处切割出了第一个字符A,其大小为4*9:\n[0188] 其水平投影为:511,486,456,444,433,406,326,360,403;\n[0189] 垂直投影为:789,1029,1108,899;\n[0190] 左上到右下投影为:1042,512,937;\n[0191] 左下到右上投影为:1012,581,937。\n[0192] 然后依次生成从A~Z,0~9的36个字符,经过缩放、灰度拉伸,得到稍大标准图像。数字9的稍大标准图像如图9所示:切割出完全包含车牌的部分,然后矫正车牌、灰度化,结果图像如图8所示:\n[0193] 然后寻找最佳位置、提取投影特征等,最终得到识别的结果:\n[0194] 通过最值拉伸灰度、计算欧氏距离比较相似度的排名依次为:\n[0195] 1:W,740.893380\n[0196] 2:A,962.678035\n[0197] 3:X,988.700157\n[0198] 4:K,1082.953831\n[0199] 5:N,1115.893364\n[0200] 6:4,1129.074400\n[0201] 7:B,1148.309192\n[0202] 8:8,1181.194734\n[0203] 9:R,1212.497010\n[0204] 10:6,1304.339680\n[0205] 11:3,1339.356562\n[0206] 12:5,1365.385660\n[0207] 13:2,1369.883207\n[0208] 14:Q,1404.147428\n[0209] 15:S,1427.617946\n[0210] 16:V,1428.980406\n[0211] 17:M,1441.592175\n[0212] 18:Z,1444.394337\n[0213] 19:G,1462.783306\n[0214] 20:9,1472.856069\n[0215] 21:E,1491.740594\n[0216] 22:D,1538.020806\n[0217] 23:P,1550.877494\n[0218] 24:Y,1558.249017\n[0219] 25:0,1633.015309\n[0220] 26:O,1635.385276\n[0221] 27:C,1729.834385\n[0222] 28:H,1757.974971\n[0223] 29:F,1777.365747\n[0224] 30:7,1851.688959\n[0225] 31:T,1964.251002\n[0226] 32:U,1991.259149\n[0227] 33:L,2017.816642\n[0228] 34:J,2186.112531\n[0229] 35:I,2376.146671\n[0230] 36:1,2408.599178\n[0231] 通过图像的平均值、标准差拉伸灰度、计算欧氏距离比较相似度的排名为:\n[0232] 1:4,289.235198\n[0233] 2:A,323.790055\n[0234] 3:6,370.255317\n[0235] 4:X,371.161690\n[0236] 5:3,388.036081\n[0237] 6:Y,394.318399\n[0238] 7:Z,415.824482\n[0239] 8:2,444.654922\n[0240] 9:S,450.132203\n[0241] 10:7,454.978021\n[0242] 11:V,467.593841\n[0243] 12:K,472.801227\n[0244] 13:J,487.766338\n[0245] 14:B,507.669184\n[0246] 15:N,522.355243\n[0247] 16:9,524.214651\n[0248] 17:G,527.087279\n[0249] 18:T,534.609203\n[0250] 19:8,535.825531\n[0251] 20:W,540.858577\n[0252] 21:R,542.438015\n[0253] 22:Q,542.535713\n[0254] 23:D,545.563012\n[0255] 24:5,553.950359\n[0256] 25:E,560.601463\n[0257] 26:0,570.956215\n[0258] 27:O,571.466534\n[0259] 28:L,576.065968\n[0260] 29:C,584.532292\n[0261] 30:M,604.440237\n[0262] 31:P,620.238664\n[0263] 32:F,629.748362\n[0264] 33:H,629.935711\n[0265] 34:U,635.203117\n[0266] 35:I,2297.134084\n[0267] 36:1,2297.229854\n[0268] 通过最值拉伸灰度、计算投影相关系数比较相似度的排名:\n[0269] 1:A,0.842462\n[0270] 2:X,0.838680\n[0271] 3:4,0.795991\n[0272] 4:2,0.753450\n[0273] 5:W,0.751541\n[0274] 6:6,0.750751\n[0275] 7:K,0.730257\n[0276] 8:S,0.701520\n[0277] 9:3,0.687937\n[0278] 10:Y,0.687572\n[0279] 11:Z,0.671579\n[0280] 12:N,0.644969\n[0281] 13:8,0.623783\n[0282] 14:V,0.622251\n[0283] 15:B,0.611217\n[0284] 16:R,0.595690\n[0285] 17:5,0.555888\n[0286] 18:G,0.546582\n[0287] 19:9,0.534896\n[0288] 20:Q,0.521448\n[0289] 21:E,0.500427\n[0290] 22:7,0.480611\n[0291] 23:C,0.474696\n[0292] 24:M,0.461677\n[0293] 25:0,0.443870\n[0294] 26:O,0.439654\n[0295] 27:D,0.421641\n[0296] 28:P,0.406044\n[0297] 29:T,0.393051\n[0298] 30:U,0.378084\n[0299] 31:H,0.373161\n[0300] 32:J,0.361659\n[0301] 33:F,0.358564\n[0302] 34:L,0.324163\n[0303] 35:1,0.174453\n[0304] 36:I,0.174447\n[0305] 通过图像的平均值、标准差拉伸灰度、计算投影相关系数比较相似度的排名:\n[0306] 1:4,0.963238\n[0307] 2:A,0.957502\n[0308] 3:X,0.937144\n[0309] 4:Y,0.930745\n[0310] 5:6,0.927854\n[0311] 6:3,0.919148\n[0312] 7:7,0.916729\n[0313] 8:Z,0.912498\n[0314] 9:J,0.906685\n[0315] 10:2,0.903998\n[0316] 11:K,0.901148\n[0317] 12:S,0.893547\n[0318] 13:V,0.885573\n[0319] 14:T,0.881063\n[0320] 15:N,0.868080\n[0321] 16:9,0.865124\n[0322] 17:B,0.864226\n[0323] 18:G,0.858132\n[0324] 19:W,0.857774\n[0325] 20:L,0.852759\n[0326] 21:8,0.849732\n[0327] 22:R,0.849615\n[0328] 23:Q,0.846765\n[0329] 24:D,0.844216\n[0330] 25:E,0.840807\n[0331] 26:5,0.840704\n[0332] 27:C,0.831695\n[0333] 28:O,0.831367\n[0334] 29:0,0.830690\n[0335] 30:M,0.825716\n[0336] 31:U,0.814876\n[0337] 32:P,0.807773\n[0338] 33:H,0.805216\n[0339] 34:F,0.801710\n[0340] 35:I,0.174107\n[0341] 36:1,0.173880\n[0342] 综合起来,得到最相似的为A。
法律信息
- 2014-12-03
未缴年费专利权终止
IPC(主分类): G06K 9/00
专利号: ZL 200910035484.2
申请日: 2009.10.09
授权公告日: 2011.11.16
- 2013-08-28
专利权的转移
登记生效日: 2013.08.05
专利权人由南京树声科技有限公司变更为南京树声科技有限公司
地址由210008 江苏省南京市广州路5号君临国际3-1107室变更为210008 江苏省南京市广州路5号君临国际3-1107室
专利权人变更为江苏泛德科技有限公司
- 2011-11-16
- 2010-04-28
实质审查的生效
IPC(主分类): G06K 9/00
专利申请号: 200910035484.2
申请日: 2009.10.09
- 2010-03-17
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 |
1
| |
2006-10-25
|
2006-05-25
| | |
2
| |
2005-10-19
|
2004-04-16
| | |
3
| |
2007-03-14
|
2006-09-20
| | |
4
| |
2007-03-21
|
2005-09-12
| | |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有被任何外部专利所引用! |