著录项信息
专利名称 | 多尺度双轴旋转激光影像三维重构系统及其方法 |
申请号 | CN201510980774.X | 申请日期 | 2015-12-22 |
法律状态 | 授权 | 申报国家 | 暂无 |
公开/公告日 | 2016-04-06 | 公开/公告号 | CN105466397A |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | G01C11/00 | IPC分类号 | G;0;1;C;1;1;/;0;0查看分类表>
|
申请人 | 广东工业大学 | 申请人地址 | 广东省广州市越秀区东风东路729号
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | 广东工业大学 | 当前权利人 | 广东工业大学 |
发明人 | 颜润明;雷亮;王琦;刘子强;钟嘉华;赖锦祥;周金运 |
代理机构 | 广州市南锋专利事务所有限公司 | 代理人 | 刘媖 |
摘要
本发明公开了一种多尺度双轴旋转激光影像三维重构系统及其方法,重构系统包括旋转控制平台、图像采集系统、标定板、线结构激光器、计算机重构处理系统;旋转控制平台包括电控旋转台和安装在电控旋转台上的伸缩旋转支架,伸缩旋转支架为T型结构,两个支臂端部装有旋转台;图像采集系统包括两个图像传感器,图像传感器分别安装在两个支臂端部的旋转台上;线结构激光器安装在电控旋转台的旋转中心处,所发出的线激光垂直于水平面,线激光所在平面、两个图像传感器所拍摄的图像平面相交于一条垂直于水平面的直线。计算机重构处理系统用于摄像头系统标定、影像匹配与三维重构运算。本发明可以解决非角点难以重构的问题,又可以应用于多尺度范围测量。
1.一种多尺度双轴旋转激光影像三维重构系统,其特征在于:包括旋转控制平台、图像采集系统、标定板、线结构激光器、计算机重构处理系统;
所述旋转控制平台包括电控旋转台(1)和安装在电控旋转台(1)上的伸缩旋转支架(2),伸缩旋转支架(2)为T型结构,伸缩旋转支架(2)具有两个支臂(4、5),所述支臂(4、5)的长度可调,所述支臂(4、5)外端装有可360度旋转的旋转台;
所述图像采集系统包括两个图像传感器(6、7),两个图像传感器(6、7)分别安装在两个支臂(4、5)端部的旋转台上;所述两个图像传感器(6、7)水平放置,互成一定夹角;所述两个图像传感器(6、7)型号相同,每个传感器上装有型号相同的可变焦FA镜头;
所述线结构激光器(3)安装在电控旋转台(1)的旋转中心处,所发出的线激光垂直于水平面,线激光所在平面、两个图像传感器(6、7)所拍摄的图像平面相交于一条垂直于水平面的直线;
所述计算机重构处理系统用于摄像头系统标定、影像匹配与三维重构运算。
2.一种利用权利要求1所述重构系统实现的重构方法,其特征在于包括如下步骤:
S1、根据测量场景大小调节所述旋转控制平台中两图像传感器的夹角与所述图像采集系统的测量距离参数;
S2、图像采集系统的标定;
S3、结合线激光旋转扫描采集图像;
S4、在计算机重构处理系统中对图像进行处理,重构出三维场景。
3.根据权利要求2所述的重构方法,其特征在于,在步骤S1中,所述根据测量场景大小调节所述旋转控制平台中两图像传感器的夹角与所述图像采集系统的测量距离参数,具体包括如下步骤:
S1-1:调整支架两端的长度和两图像传感器间的夹角,使两图像传感器的光轴交点到旋转中心的距离与所测场景的半径长度相等;
S1-2:调整可变焦FA镜头,设置合适的焦距。
4.根据权利要求2所述的重构方法,其特征在于,在步骤S2中,图像采集系统的标定包括如下步骤:
S2-1:变换标定板的姿态,用图像采集系统拍摄标定板不同姿态下的图像各两幅;
S2-2:对所拍摄的两幅图像进行标定点像素坐标提取,在计算机重构处理系统中进行摄像头系统标定,分别得出两图像传感器在该旋转角度下的相机矩阵M1-0与M2-0;
S2-3:通过对相机矩阵进行矩阵运算计算出图像采集系统每旋转1°对应的两个图像传感器相机矩阵M1-1与M2-1,M1-2与M2-2,……,M1-359与M2-359,即标定完成。
5.根据权利要求2所述的重构方法,其特征在于,在步骤S2-3中,所述通过对相机矩阵进行矩阵运算计算出图像采集系统每旋转1°对应的两个图像传感器相机矩阵M1-1与M2-1,M1-2与M2-2,……,M1-359与M2-359,具体包括:
标定时以旋转角为0°设定世界坐标系各轴的方向,其中X轴平行水平面向右,Y轴垂直水平面向下,Z轴平行水平面指向两摄像机成像平面的交线;
以相机矩阵M1-0为例,使用标定板标定后得出的矩阵M1-0是一个3×4的矩阵,当图像采集系统旋转α°时,这里选定α=1,实际上等价于摄像机自身旋转α°后,再在X轴与Z轴方向上分别平移了L1与L2的距离;
其中L1=L·(1-cosα),L2=L·sinα;L为所述旋转控制平台中心与所述图像传感器的距离;
根据几何变换的矩阵运算,可得旋转矩阵R与平移矩阵T:
即可求得旋转α°下的新摄像机矩阵M1-α=(M1-0)·R·T。
6.根据权利要求2所述的重构方法,其特征在于,在步骤S3中,进行图像采集时线结构激光器与两图像传感器以相同的角速度绕电控旋转台的旋转中心进行旋转,结合线激光旋转扫描采集影像包括如下步骤:
S3-1:启动线结构激光器,使线激光照射在场景表面;
S3-2:启动电控旋转台,每旋转1°进行一次图像对的采集;
S3-3:旋转一周后将所采集的图像对存储在计算机重构处理系统中。
7.根据权利要求2所述的重构方法,其特征在于,在步骤S4中,在计算机重构处理系统里对影像进行处理包括如下步骤:
S4-1:对影像中画面进行图像分割,提出若干激光点的像素坐标;
S4-2:对激光点进行图像匹配;
S4-3:进行三维重构运算,获得场景的三维信息。
多尺度双轴旋转激光影像三维重构系统及其方法\n技术领域\n[0001] 本发明属于图像采集处理与三维重构的技术领域,具体涉及一种多尺度双轴旋转激光影像三维重构系统及其方法。\n背景技术\n[0002] 三维重构是指对三维物体建立适合计算机表示和处理的数学模型,是在计算机环境下对其进行处理、操作和分析其性质的基础,也是在计算机中建立表达客观世界的虚拟现实的关键技术。\n[0003] 通过对场景进行三维重构的一个重要作用是获取到场景的三维信息。在传统的三维重构中,常利用角点提取进行三维重构,但是对于无明显角点的物体,其三维重构就难以实现。此外,一般应用于室内场景重构的三维重构仪器,其工作距离都有一定的范围,难以实现全自动一步到位的室内场景重构。\n[0004] 上述论述内容目的在于向读者介绍可能与下面将被描述和/或主张的本发明的各个方面相关的技术的各个方面,相信该论述内容有助于为读者提供背景信息,以有利于更好地理解本发明的各个方面,因此,应了解是以这个角度来阅读这些论述,而不是承认现有技术。\n发明内容\n[0005] 本发明的目的在于避免现有技术中的不足而提供一种多尺度双轴旋转激光影像三维重构系统及其方法,其既可以解决非角点难以重构的问题,又可以应用于多尺度范围测量。\n[0006] 本发明的目的通过以下技术方案实现:\n[0007] 提供一种多尺度双轴旋转激光影像三维重构系统,包括旋转控制平台、图像采集系统、标定板、线结构激光器、计算机重构处理系统;\n[0008] 所述旋转控制平台包括电控旋转台和安装在电控旋转台上的伸缩旋转支架,伸缩旋转支架为T型结构,伸缩旋转支架的两个支臂的端部装有可360度旋转的旋转台;\n[0009] 所述图像采集系统包括两个图像传感器,两个图像传感器分别安装在两个支臂端部的旋转台上;\n[0010] 所述线结构激光器安装在电控旋转台的旋转中心处,所发出的线激光垂直于水平面,线激光所在平面、两个图像传感器所拍摄的图像平面相交于一条垂直于水平面的直线。\n[0011] 所述计算机重构处理系统用于摄像头系统标定、影像匹配与三维重构运算。\n[0012] 其中,所述支臂的长度可调。\n[0013] 其中,所述两个图像传感器水平放置,互成一定夹角。\n[0014] 其中,所述两个图像传感器型号相同,每个传感器上装有型号相同的可变焦FA镜头。\n[0015] 本发明还提供了一种利用如上所述重构系统实现的重构方法,包括如下步骤:\n[0016] S1、根据测量场景大小选择合适的尺度;\n[0017] S2、图像采集系统的标定;\n[0018] S3、结合线激光旋转扫描采集图像;\n[0019] S4、在计算机重构处理系统中对图像进行处理,重构出三维场景。\n[0020] 其中,在步骤S1中,根据测量场景大小选择合适的尺度包括如下步骤:\n[0021] S1-1:调整支架两端的长度和两图像传感器间的夹角,使两图像传感器的光轴交点到旋转中心的距离与所测场景的半径长度约等;\n[0022] S1-2:调整可变焦FA镜头,设置合适的焦距。\n[0023] 其中,在步骤S2中,图像采集系统的标定包括如下步骤:\n[0024] S2-1:变换标定板的姿态,用图像采集系统拍摄标定板不同姿态下的图像各两幅;\n[0025] S2-2:对所拍摄的两幅图像进行标定点像素坐标提取,在计算机重构处理系统中进行摄像头系统标定,分别得出两图像传感器在该旋转角度下的相机矩阵M1-0与M2-0;\n[0026] S2-3:通过对相机矩阵进行矩阵运算计算出图像采集系统每旋转1°对应的两个图像传感器相机矩阵M1-1与M2-1,M1-2与M2-2,……,M1-359与M2-359,即标定完成。\n[0027] 其中,在步骤S2-3中,矩阵计算过程如下:\n[0028] 标定时以旋转角为0°设定世界坐标系各轴的方向,其中X轴平行水平面向右,Y轴垂直水平面向下,Z轴平行水平面指向两摄像机成像平面的交线;\n[0029] 以相机矩阵M1-0为例,使用标定板标定后得出的矩阵M1-0是一个3×4的矩阵,当图像采集系统旋转α°时(这里选定α=1),实际上等价于摄像机自身旋转α°后,再在X轴与Z轴方向上分别平移了L1与L2的距离;\n[0030] 其中L1=L·(1-cosα),L2=L·sinα;\n[0031] 根据几何变换的矩阵运算,可得旋转矩阵R与平移矩阵T:\n[0032]\n[0033] 即可求得旋转α角度下的新摄像机矩阵M1-α=(M1-0)·R·T。\n[0034] 其中,在步骤S3中,进行图像采集时线结构激光器与两图像传感器以相同的角速度绕电控旋转台的旋转中心进行旋转,结合线激光旋转扫描采集影像包括如下步骤:\n[0035] S3-1:启动线结构光激光器,使线激光照射在场景表面;\n[0036] S3-2:启动电控旋转台,每旋转1°进行一次图像对的采集;\n[0037] S3-3:旋转一周后将所采集的图像对存储在计算机重构处理系统中。\n[0038] 其中,在步骤S4中,在计算机重构处理系统里对影像进行处理包括如下步骤:\n[0039] S4-1:对影像中画面进行图像分割,提出出若干激光点的像素坐标;\n[0040] S4-2:对激光点进行图像匹配;\n[0041] S4-3:进行三维重构运算,获得场景的三维信息。\n[0042] 由于采用了上述的结构,本发明对比传统的双目三维重构系统,本发明添加的伸缩旋转支架,使被检测区域的相对误差可调,利用标定板一次标定实现不同旋转角度下的各相机系统标定,然后使用线结构激光器扫描场景区域,图像采集系统获取覆盖线激光的影像图像,进行影像匹配及三维重构运算重建得该区域的三维结构。本发明能实现多尺度的空间场景三维重构,即球半径在数十厘米至亚十米的空间范围内均适用,且重构效果优良,误差小。在所提出的重构方法中,标定一次结合矩阵运算完成不同旋转角度的相机系统标定,简化了操作;利用线激光扫描重构,避免使用一般的特征点获取算法带来的系统误差,实现了图像的精准匹配,并且解决了非角点无法进行重构的难题。\n附图说明\n[0043] 利用附图对本发明作进一步说明,但附图中的实施例不构成对本发明的任何限制,对于本领域的普通技术人员,在不付出创造性劳动的前提下,还可以根据以下附图获得其它的附图。\n[0044] 图1为本发明重构系统的结构图。\n[0045] 图2为本发明的图像采集系统旋转时的示意图。\n[0046] 图3为本发明重构方法的流程图。\n具体实施方式\n[0047] 为了使本领域的技术人员更好地理解本发明的技术方案,下面结合附图和具体实施例对本发明作进一步详细的描述,需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。\n[0048] 如图1和图2所示,本发明所述的多尺度双轴旋转激光影像三维重构系统,包括:旋转控制平台、图像采集系统、标定板、线结构激光器、计算机重构处理系统。\n[0049] 其中,旋转控制平台包括电控旋转台1与伸缩旋转支架2,伸缩支架安装在电控旋转台上,可伸缩旋转支架为T型结构,伸缩旋转支架具有两个支臂4、5,支臂长度可调,支臂外端装有旋转台,能实现360度旋转;\n[0050] 其中,图像采集系统包括两个型号相同的图像传感器6、7,每个传感器上装有型号相同的可变焦FA镜头,两个图像传感器分别安装在伸缩旋转支架的旋转台上,且水平放置,互成一定夹角;\n[0051] 其中,线结构激光器3安装在电控旋转台的旋转中心处,所发出的线激光垂直于水平面,线激光所在平面和两个图像传感器所拍摄的图像平面,此三个平面相交于一条垂直于水平面的直线;\n[0052] 其中计算机重构处理系统,可进行摄像头系统标定、影像匹配与三维重构运算。\n[0053] 如图3所示,本发明提供一种利用如上所述的基于多尺度双轴旋转激光影像三维重构系统的重构方法,包括如下步骤:\n[0054] S1:根据测量场景大小选择合适的尺度;\n[0055] S2:图像采集系统的标定;\n[0056] S3:结合线激光旋转扫描采集影像;\n[0057] S4:在计算机重构处理系统里对影像进行处理,重构出三维场景。\n[0058] 对于步骤S1,根据测量场景大小选择合适的尺度包括如下步骤:\n[0059] S1-1:调整支架两端的长度和两图像传感器间的夹角,使两图像传感器的光轴交点到旋转中心的距离与所测场景的半径长度约等;\n[0060] S1-2:调整可变焦FA镜头,设置合适的焦距;\n[0061] 作为优选,对于步骤S2,图像采集系统的标定包括如下步骤:\n[0062] S2-1:变换标定板8的姿态,用图像采集系统拍摄标定板不同姿态下的图像各两幅;\n[0063] S2-2:对所拍摄的两幅图像进行标定点像素坐标提取,在计算机重构处理系统中进行摄像头系统标定,分别得出两图像传感器在该旋转角度下的相机矩阵M1-0与M2-0;\n[0064] S2-3:通过对相机矩阵进行矩阵运算计算出图像采集系统每旋转1°对应的两个图像传感器相机矩阵M1-1与M2-1,M1-2与M2-2,……,M1-359与M2-359,即标定完成,矩阵计算过程如下:\n[0065] 如图2所示,标定时以旋转角为0°设定世界坐标系各轴的方向,其中X轴平行水平面向右,Y轴垂直水平面向下,Z轴平行水平面指向两摄像机成像平面的交线。\n[0066] 以相机矩阵M1-0为例,使用标定板标定后得出的矩阵M1-0是一个3×4的矩阵。当图像采集系统旋转α°时(这里选定α=1),实际上等价于摄像机自身旋转α°后,再在X轴与Z轴方向上分别平移了L1与L2的距离。\n[0067] 其中L1=L·(1-cosα),L2=L·sinα;\n[0068] 根据几何变换的矩阵运算,可得旋转矩阵R与平移矩阵T:\n[0069]\n[0070] 即可求得旋转α角度下的新摄像机矩阵M1-α=(M1-0)·R·T。\n[0071] 对于步骤S3,结合线激光旋转扫描采集影像包括如下步骤:\n[0072] S3-1:启动线结构光激光器,使线激光照射在场景表明;\n[0073] S3-2:启动电控旋转台,每旋转1°进行一次图像对的采集;\n[0074] S3-3:旋转一周后将所采集的图像对存储在计算机重构处理系统中;\n[0075] 对于步骤S4,在计算机重构处理系统里对影像进行处理包括如下步骤:\n[0076] S4-1:对影像中画面进行图像分割,提出出若干激光点的像素坐标;\n[0077] S4-2:对激光点进行图像匹配;\n[0078] S4-3:进行三维重构运算,获得场景的三维信息。\n[0079] 上面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述的其他方式来实施,因此,不能理解为对本发明保护范围的限制。\n[0080] 总之,本发明虽然例举了上述优选实施方式,但是应该说明,虽然本领域的技术人员可以进行各种变化和改型,除非这样的变化和改型偏离了本发明的范围,否则都应该包括在本发明的保护范围内。
法律信息
- 2022-11-29
未缴年费专利权终止
IPC(主分类): G01C 11/00
专利号: ZL 201510980774.X
申请日: 2015.12.22
授权公告日: 2018.09.25
- 2018-09-25
- 2016-05-04
实质审查的生效
IPC(主分类): G01C 11/00
专利申请号: 201510980774.X
申请日: 2015.12.22
- 2016-04-06
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 |
1
| |
2006-11-22
|
2006-06-08
| | |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有被任何外部专利所引用! |