著录项信息
专利名称 | 一种基于无人机的火灾监测预警方法 |
申请号 | CN201210306683.4 | 申请日期 | 2012-08-24 |
法律状态 | 授权 | 申报国家 | 中国 |
公开/公告日 | 2012-12-12 | 公开/公告号 | CN102819926A |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | G08B17/00 | IPC分类号 | G;0;8;B;1;7;/;0;0;;;G;0;8;B;2;5;/;0;0查看分类表>
|
申请人 | 华南农业大学 | 申请人地址 | 广东省广州市天河区五山路483号
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | 华南农业大学 | 当前权利人 | 华南农业大学 |
发明人 | 包世泰;王建芳;石俊卫 |
代理机构 | 广州市华学知识产权代理有限公司 | 代理人 | 杨晓松 |
摘要
一种基于无人机的火灾监测预警方法,利用搭载了数字相机和GPS接收机的无人机巡回监测和拍摄图像,记录拍摄图像以及拍摄时的GPS位置和拍摄姿态,并实时传回地面站;地面站对接收的图像进行扫描,识别潜在火点(栅格)和已燃火点(栅格),得到精确的火场位置及范围;地面站基于连续拍摄的航片计算相邻时刻的多个火场范围边界和重心,得出离火场重心最远的点即为火头点,通过对火头点位置变化的分析,判断火灾蔓延的方向,并计算出火灾蔓延的速度与加速度。本方法具有机上搭载设备的图像处理能力要求低、无人机荷载轻、续航巡检时间长、设备丢失或损坏的风险低,能自动提取火带蔓延的方向和自动计算火带蔓延的速度与加速度,实用性强等优点。
一种基于无人机的火灾监测预警方法\n技术领域\n[0001] 本发明涉及一种火灾监测预警技术,特别涉及一种基于无人机的火灾监测预警方法。\n背景技术\n[0002] 国内常用的森林火灾监测方法主要有地面巡护、瞭望台监测、卫星遥感等几种方式。其中,地面巡护监测范围小,许多交通不便的地方难以巡护;瞭望台观察效果过于依赖瞭望员的经验,准确率低、误差大,并且易受地形地势限制,覆盖范围小、存在火灾监测死角;气象卫星遥感监测森林火灾是近些年来比较普遍的森林火险监测手段,具有覆盖范围大、及时迅速、连续完整的特点,然而该方法也存在着遥感图像分辨率不足、灵活性差等问题;利用无人机进行森林火灾监测可以克服上述缺陷,其部署方便、数据采集快捷、信息丰富以及技术成本较低。现有无人机火灾监测公开的技术主要有两项:公布号为CN102496234A的专利和公布号为CN101650866A的专利。CN102496234A号专利公开的技术是“当发现森林的火源点后,利用无人机上红外摄像仪将其拍摄下来,并将无人机GPS位置通过卫星通信发送到消防中心”,谁发现火源点?如何发现火源点?能否自动识别、提取火源点?该专利技术中无详细说明,无法自动识别火灾区域、蔓延范围以及发展趋势,该专利中公开的技术实用性很差。CN101650866A号专利公开的技术侧重利用无人机上的红外图像设备采集图像,并在无人机上将模拟信号转化为数字信号(红外图像灰度值数据),对温度高于阈值的栅格利用算法识别为疑似火灾火焰或高危点,相比CN102496234A号专利中公开的技术翔实具体,但对无人机要求较高,必须搭载图像处理设备,这不仅会缩短无人机空中巡检时间,也会因搭载设备较多而导致安全隐患,同时存在设备丢失或被损坏的风险;并且,机载设备实时处理红外图像具有较大的局限性,其图像处理结果比较简单,看不出可识别计算出火灾精确范围、蔓延方向、速度和加速度等信息,无法对森林火灾预警和扑救指挥工作提供实用的决策参考信息。\n[0003] 由此可见,现有的无人机火灾监测技术存在以下不足:\n[0004] (1)虽然理论上可获得火灾大概位置或疑似区域,但是对红外摄像处理比较初级,难以得到火灾蔓延方向、精确范围和速度等重要信息,无法对森林火灾预警和扑救指挥工作提供实用的决策参考信息。\n[0005] (2)主要依赖无人机平台及其搭载设备来处理火灾图像,技术手段单一,监测采集能力与综合分析能力存在其局限性,未能全面利用现代摄影测量与遥感图像处理技术进行火灾自动识别、信息提取与预警分析,提供的信息的准确性和实用性差。\n[0006] (3)无人机上搭载的设备比较多,巡检时间较短,搭载设备丢失或损坏的风险较高。\n发明内容\n[0007] 本发明的目的在于克服现有技术的缺点与不足,提供一种基于无人机的火灾监测预警方法,该方法能精确计算火灾的位置与范围,并能进一步计算火头位置、火带的蔓延方向、火带蔓延的速度和加速度,无人机搭载设备简单以及实用性强。\n[0008] 本发明的目的通过下述技术方案实现:一种基于无人机的火灾监测预警方法,包括以下步骤:\n[0009] 步骤1、无人机对巡查区域不断拍摄可见光图像或热红外图像,并实时记录每幅图像所对应的无人机拍摄位置(用GPS坐标、航高参数来标示)和拍摄姿态(包括偏航角、侧滚角和俯仰角等),无人机通信系统将监测图像以及无人机的拍摄位置和拍摄姿态通过无线传输技术实时传回地面站;\n[0010] 步骤2、地面站对接收的图像按行列进行栅格扫描,结合预设的阀值,将每个栅格的值与潜在火点和已燃火点的阀值进行比较计算,可自动识别已燃火点或疑似火点(栅格),如果没有发现已燃火点或潜在火点(表示无火点),则不予处理;如果发现潜在火点或已燃火点,则记录栅格的行列号转换为数字矩阵,多个相邻的栅格得到火场范围,再运行步骤3,所述阀值为综合火灾理论温度和实验结果而形成的经验值,可预存于数据库中供调用和扩展(潜在火点的阀值低于已燃火点的阀值);\n[0011] 步骤3、地面站对发现潜在火点或已燃火点的图像,结合GPS坐标、航高、偏航角、侧滚角和俯仰角等参数,根据摄影测量原理进行几何校正等图像处理工作;基于几何校正后的图像可得到火点及火场边界的精确坐标,坐标取自相应栅格的中心点坐标;\n[0012] 步骤4、扑救森林火灾时主攻方向是打火头,只有将火头扑灭,火灾才能得到控制,火灾发生后蔓延最快的部位即为火头,因此火头位置及其变化是火灾预警、扑救指挥最关心的信息,根据连续拍摄的相邻图像,自动识别提取火灾蔓延时的火头点;\n[0013] 步骤5、根据相邻时刻火头点的位置变化,自动判断火带蔓延方向,并计算出火带蔓延的速度和加速度,取相邻时刻三个火头点的向量为林火蔓延方向,相反,如果火场边界各点到重心的距离都在一个容差范围内,则说明火灾向各个方向是均匀蔓延的;用以上方法提取出连续三张图像的火头点位置,假设火灾初期在同一方向的蔓延为匀加速直线运动或匀速直线运动,火头位置变化符合相应的运动学公式,建立方程组计算得到火头瞬间的蔓延速度和加速度。\n[0014] 所述步骤1中,所述无人机上搭载有设备,所述设备由数字相机和GPS接收机组成,所述数字相机根据地面站传送的指令,支持在可见光彩色图像、微光黑白图像、红外热成像和视频四种拍摄输出模式中动态切换,所述无人机上搭载的设备记录拍摄图像以及拍摄拍摄图像时的GPS位置和无人机拍摄姿态,所述图像以及无人机的位置和拍摄姿态通过无线传输技术传回地面站。\n[0015] 所述步骤3中,地面站对接收的图像结合GPS坐标、航高、偏航角、侧滚角和俯仰角等参数,根据摄影测量原理进行几何校正,图像重采样可得到栅格图像的精确坐标,能与地形图叠加显示与分析。\n[0016] 所述步骤4中,火头是火灾蔓延最快最远的点,火头点的提取可采用直接栅格法或栅格转矢量法,先计算火场重心,再提取火场边界上离重心最远的点为火头点。\n[0017] 所述步骤5中,地面站依据无人机传回的连续拍摄的若干图像,计算相邻拍摄时刻的火头点位置变化,判断出火带蔓延的方向,并计算火带蔓延的速度和加速度。\n[0018] 根据权利要求1所述的基于无人机的火灾监测预警方法,其特征在于,所述步骤5中,地面站依据无人机传回的连续拍摄的图像,计算相邻拍摄时刻的图像的火头点位置变化,判断出火带蔓延的方向,并计算火带蔓延的速度和加速度。\n[0019] 所述步骤4中,火头点的提取采用直接栅格法或栅格转矢量法。\n[0020] 所述步骤2中,地面站对接收的图像进行快速扫描自动判断有无火点,具体是将图像每个栅格的值与预设的阀值进行比较,所述阀值来自结合各林种理论燃烧温度和实验结果形成经验值的数据库。比较结果转换为一个M×N的数值(0~2n)矩阵,方便计算识别火点。\n[0021] 所述步骤3中,所述几何校正为:结合参数,并根据摄影测量原理进行几何校正,图像重采样得到栅格图像的精确坐标,所述参数包括GPS坐标、航高、偏航角、侧滚角和俯仰角。\n[0022] 所述步骤1中所述设备由数字相机和GPS接收机组成,所述数字相机根据地面站传送的指令,支持在可见光彩色图像、微光黑白图像、红外热成像和视频四种拍摄输出模式中动态切换。\n[0023] 所述步骤1中,所述无人机上搭载有设备,所述设备记录拍摄图像以及拍摄图像时的GPS位置和无人机的拍摄姿态,所述图像以及无人机的位置和拍摄姿态通过无线传输技术传回地面站。\n[0024] 本发明相对于现有技术具有如下的优点及效果:\n[0025] (1)本发明采用摄影测量和遥感图像处理技术,主要侧重地面站对图像的自动处理,无人机只需将拍摄图像及拍摄瞬间的位置和姿态信息传回地面站即可,故对无人机上的处理系统要求不高,所以无人机无需运载过多设备、整体重量轻,续航巡检的时间较长,有效降低了机载设备丢失或损坏的风险。\n[0026] (2)地面站通过对无人机拍摄的单张可见光或红外图像,进行快速扫描、几何校正和自动识别,结合预设的阀值和栅格计算,自动判断出潜在火点(栅格)、已燃火点(栅格)、火灾范围(火场)和燃烧高温区,能快速获取火场动态的火情信息,处理效率高。\n[0027] (3)地面站基于连续拍摄的图像计算提取林火蔓延时的火头,通过火头位置变化的计算分析,自动判断火带蔓延的方向、速度与加速度,对森林防火机构开展林火扑救、人员疏散、物资输送等决策提供宝贵的预警时间和实用的决策参考信息,实用性强。\n附图说明\n[0028] 图1是本发明的整体流程图。\n[0029] 图2是发生火灾的火场区域示意图。\n[0030] 图3是提取火场边界的示意图。\n[0031] 图4是简化火场边界的示意图。\n[0032] 图5是火场范围(矢量多边形)的重心计算示意图。\n[0033] 图6是火头点提取的示意图。\n[0034] 图7是判断火灾蔓延方向的示意图。\n[0035] 图8是栅格扫描后根据阀值得到不同情况的火场示意图。\n[0036] 图9是栅格计算方式直接得到火场重心示意图。\n[0037] 图10是栅格计算方式得到火头点位置示意图。\n具体实施方式\n[0038] 下面结合实施例及附图对本发明作进一步详细的描述,但本发明的实施方式不限于此。\n[0039] 实施例1\n[0040] 如图1所示,本实施例的基于无人机的火灾监测预警方法包括以下步骤:\n[0041] 步骤1、利用搭载数字相机的无人机对林区进行巡查监测,所述数字相机根据地面站传送的指令,支持在可见光彩色图像、微光黑白图像、红外热成像和视频四种拍摄输出模式中动态切换,可用于不同时间不同场景的拍摄,拍摄的火灾图像的示意图如图2所示;无人机系统通过无线传输技术将图像及拍摄该图像时刻的无人机位置和拍摄姿态信息不断地传回地面站;\n[0042] 步骤2、地面站对无人机传回的图像逐行扫描,将每个栅格的值与预设的阀值(所述阀值来自结合各林种理论燃烧温度和实验结果形成经验值的数据库)进行比较,如图8所示,预设高温阀值(如100℃)、已燃阀值(如70℃)和潜在燃烧阀值(如45℃)三种,将扫描图像栅格值与阀值比较,比较结果转换为一个M×N的数值(0~2n)矩阵,见下表:\n[0043] \n[0044] 根据此取值划分,可将图像用相应颜色直观展示火场不同情况的分布,同时可利用数值矩阵高效判断,若数值全为0则不予处理,若数值有大于0的则运行下一步骤;\n[0045] 步骤3、地面站利用拍摄参数对图像进行几何校正,所述参数包括:(1)GPS坐标(经纬度);(2)航高(海拔高度);(3)偏航角ω(瞬间飞机长轴即纵轴与正北方位的夹角);(4)侧滚角θ(飞机短轴即横轴与水平面的夹角);(5)俯仰角φ(飞机长轴即纵轴与水平面的夹角);如果图像中存在潜在火点,则根据行列号(rows,columns)和图像校正后的原点坐标(x0,y0)得到潜在火点的精确位置(x0+columns*pixSize,y0+rows*pixSize),发布预警信息;如果存在已燃火点,利用栅格转矢量面方法提取瞬时的火灾范围。\n[0046] 步骤3中所述的几何校正的过程为:\n[0047] 1、先将图像变换为标准高度下的图像,方法是按照无人机拍摄照片时瞬间的实时高度与额定的飞行高度相对比,对摄影图像进行等比例缩放,如进行航拍时设定的飞行高度为200米,而实际的飞行高度为250米,则将图像放大1.4倍,即可将图像转换为标准高度下的图像;\n[0048] 2、对图像进行坐标系的变换,可根据偏航角ω、侧滚角θ、俯仰角φ可进行相应的转换来对图像进行校正,具体如下:\n[0049] 首先来计算偏航变换矩阵T1,将地面坐标系绕z轴旋转ω角度,使坐标系S-XYZ变为S-x1y1z,在坐标系的变换过程中,z坐标不变,其表达式为:\n[0050] \n[0051] 写成矩阵形式为:\n[0052] \n[0053] 接着计算俯仰变换矩阵T2,将S-x1y1z绕y1轴旋转φ角度,使坐标系S-x1y1z变为S-xsy1z1,在坐标系的变换过程中,y1坐标不变,其表达式为:\n[0054] \n[0055] 写成矩阵为:\n[0056] \n[0057] 然后计算滚转变换矩阵T3,将S-xsy1z1绕xs轴旋转θ角度,使坐标系由S-xsy1z1变为S-xsyszs,xs坐标不变,其表达式为:\n[0058] \n[0059] 写成矩阵为:\n[0060] \n[0061] 所以由地面坐标系S-XYZ到摄像坐标系S-xsyszs坐标变换矩阵为:\n[0062] \n[0063] 根据无人机的姿态信息获得摄像机相对于地面坐标系的姿态,经过矩阵T的反变换,可计算出该航摄图像在地面坐标系中的精确坐标,就可以从拍摄的航空图像获得校正后的图像;\n[0064] 3、校正后的图像重采样,校正后图像空间中像元有变形或映射位置有偏移,为了获得与该位置相对应的栅格值,必须进行插值运算;常用的采样方法有最邻近法、双线性内插法和三次卷积法等,为了保证栅格值平滑过渡,同时减少计算的时间,我们选用双线性内插法对其进行插值;\n[0065] 步骤4:火头的发现与控制对火灾扑救决策非常重要,利用栅格转矢量法提取火头点,具体包括以下步骤:\n[0066] 4-1、提取火场边界:对校正后的图像逐行进行扫描、识别,基于栅格计算提取出该行中单元温度的最大值和最小值,根据相邻栅格温差最大即为火灾蔓延的边界,得到火场边界,也即火线的位置,如图3所示;\n[0067] 4-2、火场边界线简化:火场边界线需要简化以方便下一步计算,这里采用Douglas-Peucker算法来对火场这一矢量多边形进行简化。该算法具体步骤如下:①取多边形横坐标值最大和最小的两个点,连成一条直线AB;②求出多边形中AB左侧的点中距离AB最远的点C,计算其与AB的距离d;③比较该距离与预先给定的阀值的大小,如果小于阀值,则该线段作为折线的近似,该段处理完毕;④如果距离大于阀值,则用C将矢量线分为两段AC和BC,并分别对两段进行②③步的处理;⑤当AB左侧的所有点都处理完毕后,对AB右侧执行同样的操作;⑥将剩下的点依次连接起来,即为简化后的多边形(如图4所示);\n[0068] 4-3、计算简化后火场的重心:如图5所示,假设火灾是向外等速扩散的,则火场为匀质分布的凸多边形,其重心G的计算公式为:\n[0069] \n[0070] 4-4、提取火头点位置:火带蔓延往往在某一个方向上的速度最快,因此火场形成的多边形在这个方向最凸,该方向上的火头离火场多边形重心的距离也最远,因此,求出火场边界多边形上到重心G距离最大的点即为火头点(如图6所示),如果火场边界上各点到重心的距离都在一个容差范围内,则说明火灾向各个方向是均匀蔓延的;\n[0071] 步骤5:利用连续拍摄的三张图像分析火头点的位置变化,判断出火头的蔓延方向,计算出火带蔓延速度和蔓延加速度等动态信息,取相邻时刻三个火头点的向量为火蔓延方向(如图7所示的箭头所指向的方向),暂且把火带蔓延方向上的运动看做匀加速直线运动,通过公式\n[0072] \n[0073] 建立方程组:\n[0074] \n[0075] 式中,S1为第一张图像中火头点与第二张图像中火头点之间的距离,S2为第二张图像中火头点和第三张图像中火头点之间的距离,t1和t2分为拍摄第二张图像和第三张图像时的时间与拍摄第一张图像时的时间差;通过解方程组,可计算出拍摄第一张图像时火带蔓延的速度v0和加速度a。\n[0076] 实施例2\n[0077] 本实施例除以下特征外,同实施例1:\n[0078] 步骤4:火头是火灾蔓延最快最远的点,采用直接栅格法直接计算提取火头点,具体包括以下步骤:\n[0079] 4-1、直接计算火灾区域的重心,无须转化为矢量多边形求解重心,火灾重心采用所在栅格的行列号(ROWg,COLg)表示,见图9,计算公式如下:\n[0080] \n[0081] Cols为火灾燃烧区域的栅格总列数,Rows为火灾燃烧区域的栅格总行数,Rowsi为每一列已燃栅格的个数,Colsj为每一行已燃栅格的个数, 为逐列重心即当前列已燃栅格上下居中的行号(若当前列的栅格数为偶数时,行号取上下居中的两个相邻栅格行号之和的一半), 为逐行重心即当前行已燃栅格左右居中的列号(若当前行的栅格数为偶数时,列号取左右居中的两个相邻栅格列号之和的一半),符号[]表示最后的行号、列号取值要四舍五入取整;\n[0082] 4-2、提取火头点位置:火带蔓延往往在火头方向上的速度最快,火头离火场重心的距离也最远,因此,求出火灾燃烧区域到重心G距离最大的栅格即为火头点(如图10所示,距离最远的F4所示的点为火头点),为了提高计算速度,可首先筛选行号或列号最大、行号或列号最小的栅格作为候选点Fi,逐一计算候选点与重心G的距离,d2=(Fi行号-G行号)2+(Fi列号-G列号)2最大的点即为火头点;\n[0083] 如果候选各点到重心的距离都在一个容差范围内,则说明火灾向各个方向是均匀蔓延的;\n[0084] 步骤5:利用连续拍摄的三张图像分析火头点的位置变化,判断出火头的蔓延方向,计算出火带蔓延速度和蔓延加速度等动态信息。取相邻时刻三个火头点行列位置H1(Row1,Col1)、H2(Row2,Col2)和H3(Row3,Col3),根据图7所示的向量为蔓延方向,可直接采用相对位移找到向量终点行列位置为H4(Row3+Row2-Row1,Col3+Col2-Col1),通过比较H4与H1的行列号大小可自动判断计算蔓延方向与具体角度:\n[0085] \n[0086] 角度\n[0087] 若把火带蔓延方向上的运动看做匀加速直线运动,通过公式\n可建立方程组:\n[0088] \n[0089] 式中,pixSize为栅格的地面分辨率,t1和t2分为拍摄第二张图像和第三张图像时的时间与拍摄第一张图像时的时间差;通过解方程组,可计算出拍摄第一张图像时火带蔓延的速度v0和加速度a。\n[0090] 上述实现为本发明较佳的一种实现方式,但本发明的实现方式并不受上述所述的限制,其他任何未背离本发明的精神实质与原理下所作的改变、修饰、替代、组合、简化,均应为等效的置换方式,都包含在本发明保护范围之内。
法律信息
- 2022-08-09
未缴年费专利权终止
IPC(主分类): G08B 17/00
专利号: ZL 201210306683.4
申请日: 2012.08.24
授权公告日: 2015.04.29
- 2015-04-29
- 2013-01-30
实质审查的生效
IPC(主分类): G08B 17/00
专利申请号: 201210306683.4
申请日: 2012.08.24
- 2012-12-12
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 |
1
| |
2010-06-02
|
2009-12-01
| | |
2
| |
2009-05-27
|
2008-12-19
| | |
3
| |
2010-02-17
|
2009-09-22
| | |
4
| | 暂无 |
2009-11-16
| | |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有被任何外部专利所引用! |