著录项信息
专利名称 | 红外与可见光图像融合的汽车抗晕光视频图像处理方法 |
申请号 | CN201610363585.2 | 申请日期 | 2016-05-26 |
法律状态 | 撤回 | 申报国家 | 中国 |
公开/公告日 | 2016-10-12 | 公开/公告号 | CN106023129A |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | G06T5/50 | IPC分类号 | G;0;6;T;5;/;5;0;;;G;0;6;T;3;/;0;0;;;G;0;6;T;5;/;0;0查看分类表>
|
申请人 | 西安工业大学 | 申请人地址 | 陕西省西安市金花北路4号
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | 西安工业大学 | 当前权利人 | 西安工业大学 |
发明人 | 郭全民;董亮;田英侠;巩兆伟;周芸;李晓玲;郑少锋 |
代理机构 | 陕西电子工业专利中心 | 代理人 | 程晓霞 |
摘要
本发明公开了一种红外与可见光图像融合的汽车抗晕光视频图像处理方法,从规避碰撞物的角度,解决了夜间汽车晕光现象引起的交通安全问题,其实现包括有:采集夜间道路红外图像和可见光图像;以红外图像为准,做图像配准;分别对红外和可见光图像增强处理;提取增强后可见光图像的亮度信号分量Y和两个色度信号分量U和V;Y和增强后红外图像小波融合得到新的亮度信号分量Y′;Y′与U和V做YUV反变换得到最终的彩色融合图像。本发明在配准后增加了图像增强处理,并对其参数进行优化,在消除晕光的同时,对融合后图像的亮度和暗处细节信息有较大的保留和提升。本发明能够有效规避因晕光引起的碰撞问题。适用于汽车抗晕光领域。
1.一种红外与可见光图像融合的汽车抗晕光视频图像处理方法,其特征在于,红外与可见光图像融合的汽车抗晕光视频图像处理方法包括有以下步骤:
步骤1车载红外热相仪和可见光摄像机采集到对应于同一时间空间的夜间道路红外图像和可见光图像;
步骤2以红外图像为参考图像,对两幅图像进行图像配准,得到在时间和空间上一致性更高的红外图像和可见光图像;
步骤3通过MSRCR图像增强算法对配准后的可见光图像进行增强处理,得到亮度更高、图像信息更丰富的可见光图像;
步骤4通过MSR图像增强算法对红外图像进行增强处理,得到对比度更高的红外图像;
步骤5对增强后的可见光图像进行YUV正变换提取出亮度信号分量Y和两个色度信号分量U和V;
步骤6把亮度信号分量Y和增强后的红外图像进行小波融合得到新的消除了晕光的亮度信号分量Y′;
步骤7对新的亮度信号分量Y′,色度信号分量U和V进行YUV反变换得到最终的融合图像,完成对夜间道路图像的抗晕光处理,输出消除了晕光、增强了暗处细节信息的彩色融合图像。
2.根据权利要求1所述的红外与可见光图像融合的汽车抗晕光视频图像处理方法,其特征在于,步骤3中所述通过MSRCR图像增强算法对配准后的可见光图像进行增强处理,包括有如下处理步骤:
3.1根据下式,确定高斯环绕函数计算出相应的高斯模板,选取各模板对应的尺度C;
F(x,y)=μ·exp((-(x2+y2)2)/C2)&∫∫F(x,y)dxdy=1
式中:F(x,y)表示所选用的高斯环绕函数模型;(x,y)表示像素点的坐标;μ表示对应通道的归一化常数;C表示F(x,y)的尺度常数,尺度C越大,图像的动态范围压缩越大,与之对应的图像细节越突出,尺度C越小,与之对应的图像整体效果越好,颜色越自然。
3.2根据下式,计算3种尺度下得到结果的加权平均,确定各尺度对应的权重系数W的值;
式中:RMSRi(x,y)是不带色彩恢复的增强输出;N表示增强算法所采用的尺度个数;Wn是与F(x,y)对应的权重系数;Ii(x,y)为第i个颜色通道的像素点坐标,i∈R,G,B。
3.3根据下式,计算彩色恢复因子:
式中:Ci(x,y)表示与此增强算法对应的彩色恢复因子,i表示颜色通道;β表示的是增益常数;α为受控制的非线性强度系数。
3.4将彩色恢复因子代入下式,得到增强后的可见光图像:
式中:RMSRCRi(x,y)是带颜色恢复的MSRCR增强算法的输出,用于对可见光图像的增强。
3.根据权利要求1所述的红外与可见光图像融合的汽车抗晕光视频图像处理方法,其特征在于,将步骤4中所述通过MSR图像增强算法对红外图像进行增强处理,包括有如下处理步骤:
4.1同样根据高斯环绕函数计算出相应的高斯模板,选取各模板对应的尺度数C;
F(x,y)=μ·exp((-(x2+y2)2)/C2)&∫∫F(x,y)dxdy=1
4.2根据下式,将红外图像类比成可见光图像的一个颜色通道,计算3种尺度下得到结果的加权平均,权重系数W的值,并根据各权值获得增强后的红外图像;
式中:RMSR(x,y)是不带色彩恢复的增强输出;N表示增强算法所采用的尺度数;Wn是与F(x,y)对应的权重系数;I(x,y)为像素点坐标。
4.根据权利要求2或3所述的红外与可见光图像融合的汽车抗晕光视频图像处理方法,其特征在于,图像增强的参数设置包括有:
尺度个数N=3,表示选取3个尺度;各个尺度对应的尺度数C在[1,249]范围内小、中、大各取一个值,其中小值在[5,20]之间,中值在[100,130]之间,大值在[220,249]之间;与小、中、大尺度C对应的权重系数W分别为0.30、0.35、0.35;增益常数β取值在[45,55]之间;非线性强度系数α取值在[115,125]之间,增强算法中的各参数在以上范围内取值能够得到较好的增强效果。
5.根据权利要求4所述的红外与可见光图像融合的汽车抗晕光视频图像处理方法,其特征在于,增强算法中参数的优选取值为:
尺度个数N=3;较小尺度值C1=10;中间尺度值C2=120;较大尺度值C2=240;非线性强度系数α=120;增益常数β=50;较小尺度值C1对应的权重系数W1=0.30;中间尺度值C2对应的权重系数W2=0.35;较大尺度值C2对应的权重系数W1=0.35。
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 |
1
| |
2010-05-26
|
2009-12-22
| | |
2
| |
2015-11-18
|
2015-08-05
| | |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 1 | | 2017-03-07 | 2017-03-07 | | |
2 | | 2017-03-07 | 2017-03-07 | | |