著录项信息
专利名称 | 一种全景拼接画面监控方法及装置 |
申请号 | CN201510464918.6 | 申请日期 | 2015-07-31 |
法律状态 | 授权 | 申报国家 | 中国 |
公开/公告日 | 2015-12-30 | 公开/公告号 | CN105208323A |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | H04N7/18 | IPC分类号 | H;0;4;N;7;/;1;8查看分类表>
|
申请人 | 深圳英飞拓科技股份有限公司 | 申请人地址 | 广东省深圳市南山区华侨城东部工业区H-3栋3楼
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | 深圳英飞拓科技股份有限公司 | 当前权利人 | 深圳英飞拓科技股份有限公司 |
发明人 | 林小晖 |
代理机构 | 深圳中一专利商标事务所 | 代理人 | 张全文 |
摘要
本发明适用于监控领域,提供了一种全景拼接画面监控方法及装置,方法包括:获取拼接全景摄像机生成的全景拼接画面;在所述全景拼接画面中检测目标;当检测到目标时,控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。本发明适用于一些监控大面积区域,其有益效果在于两方面,一方面实现了超宽屏监控、自动跟踪放大监控、无人操作下自动驱动快球监控的功能,另一方面,简化了人工操作的步骤,提高了全景拼接画面监控的处理效率,有利于推广使用。
一种全景拼接画面监控方法及装置\n技术领域\n[0001] 本发明属于监控领域,尤其涉及一种全景拼接画面监控方法及装置。\n背景技术\n[0002] 随着监控设施的逐步完善,相关部门建立了监控系统,监控系统采用摄像机监控各个区域,以确保区域的安全工作的正常开展。随着区域的放大,摄像机也越来越多,以前在街道上摄像机的数量是街头街尾各一个,现在是每条街道都有几个,如果原来摄像机的数量只有2个,那么现在摄像机的数量可能就是20个或者30个。\n[0003] 然而,现有的监控系统,在监控大面积区域的目标时,无法生成包括目标的局部清晰和全局囊括的截图,不利于对大面积区域中的目标进行有效地监控。其原因在于以下三个方面,详述如下:\n[0004] 第一方面,监控大面积区域,需要多个普通摄像机,同时多个普通摄像机对着多个角落,目标容易出现在多个画面中,但图像之间无连续性,当出现事故时,监控人员不能连续地查看现场,只能一个一个轮流地切到显示器,监控人员容易疲倦,因此无法生成包括目标的局部清晰和全局囊括的截图;\n[0005] 第二方面,当用一个全景摄像机代替多个普通摄像机时,全景摄像机看得更广,且连续,但由于全景摄像机的画面分辨率相对小,也看不清,因此无法生成包括目标的局部清晰和全局囊括的截图;\n[0006] 第三方面,当用一般的跟踪快球时,视野有限,跟踪的时候其它区域就监控不到,因此无法生成包括目标的局部清晰和全局囊括的截图。\n发明内容\n[0007] 本发明实施例的目的在于提供一种全景拼接画面监控方法,旨在解决现有的监控系统,在监控大面积区域的目标时,无法生成包括目标的局部清晰和全局囊括的截图,不利于对大面积区域中的目标进行有效地监控的问题。\n[0008] 本发明实施例是这样实现的,一种全景拼接画面监控方法,包括:\n[0009] 获取拼接全景摄像机生成的全景拼接画面;\n[0010] 在所述全景拼接画面中检测目标;\n[0011] 当检测到目标时,控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0012] 本发明实施例的另一目的在于提供一种全景拼接画面监控装置,包括:\n[0013] 全景拼接画面获取模块,用于获取拼接全景摄像机生成的全景拼接画面;\n[0014] 目标检测模块,用于在所述全景拼接画面中检测目标;\n[0015] 控制模块,用于当检测到目标时,控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0016] 在本发明实施例中,当检测到目标时,控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。解决了现有的监控系统,在监控大面积区域的目标时,无法生成包括目标的局部清晰和全局囊括的截图,不利于对大面积区域中的目标进行有效地监控的问题。本发明适用于一些监控大面积区域,其有益效果在于两方面,一方面实现了超宽屏监控、自动跟踪放大监控、无人操作下自动驱动快球监控的功能,另一方面,简化了人工操作的步骤,提高了全景拼接画面监控的处理效率,有利于推广使用。\n附图说明\n[0017] 图1是本发明实施例提供的全景拼接画面监控方法的实现流程图;\n[0018] 图2是本发明实施例提供的全景拼接画面监控方法中步骤S103的实现流程图;\n[0019] 图3是本发明实施例提供的全景拼接画面监控方法中设置快球的实现流程图;\n[0020] 图4是本发明实施例提供的全景拼接画面监控方法中生成截图的第一实现流程图;\n[0021] 图5本发明实施例提供的全景拼接画面监控方法中生成截图的第二实现流程图;\n[0022] 图6是本发明实施例提供的全景无移动侦测及单快球的实现流程图;\n[0023] 图7是本发明实施例提供的全景有移动侦测及单快球的实现流程图;\n[0024] 图8是本发明实施例提供的全景无移动侦测及多个快球流程的实现流程图;\n[0025] 图9是本发明实施例提供的全景有移动侦测及多个快球的实现流程图;\n[0026] 图10是本发明实施例提供的快球跟踪后抓拍的效果示意图;\n[0027] 图11是本发明实施例提供的全景摄像机与快球跟踪后同步抓拍的效果示意图;\n[0028] 图12是本发明实施例提供的水平等夹角多镜头方案的全景摄像机侧面示意图;\n[0029] 图13是本发明实施例提供的垂直等距分布等夹角多镜头方案的全景摄像机侧面示意图;\n[0030] 图14是本发明实施例提供的快球示意图;\n[0031] 图15是本发明实施例提供的同时显示两个全景摄像机和快球的截图;\n[0032] 图16是本发明实施例提供的全景拼接画面监控装置的结构框图。\n具体实施方式\n[0033] 为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。\n[0034] 实施例一\n[0035] 图1是本发明实施例提供的全景拼接画面监控方法的实现流程图,详述如下:\n[0036] 在步骤S101中,获取拼接全景摄像机生成的全景拼接画面;\n[0037] 在步骤S102中,在所述全景拼接画面中检测目标;\n[0038] 其中,在全景拼接画面中设置优选区域,对优选区域进行视频分析,检测目标,所述目标包括点击的目标和侦测的目标。\n[0039] 在所述全景拼接画面中检测目标,有以下三种检测的方式,详述如下:\n[0040] 第一种方式:在拼接全景图像的入侵侦测区域中,移动侦测目标。\n[0041] 第二种方式:在拼接全景图像的快球监控区域中,快球侦测目标。\n[0042] 第三种方式:在拼接全景图像中,点击目标,触发快球移动到目标区域,并开始侦测目标。\n[0043] 其中,入侵侦测区域和快球监控区域为拼接全景图像中不同的区域。\n[0044] 其中,入侵侦测区域和快球监控区域之间可存在重叠区域。\n[0045] 其中,快球包括普通快球和智能跟踪快球。\n[0046] 普通快球,手动或软件发控制PTZ指令才会动起来;\n[0047] 智能跟踪快球,除包括普通快球功能外,还能自动检测图像的运动目标,并进行自动跟踪。在步骤S103中,当检测到目标时,控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0048] 其中,当检测到目标时,根据设定的目标处理顺序,控制所述快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0049] 其中,设定的目标处理顺序,具体为:\n[0050] 当侦测的目标和点击的目标同时产生时,优先处理点击的目标;\n[0051] 当侦测的目标包括拼接全景图像中移动侦测的目标和快球侦测的目标时,优先处理拼接全景图像中移动侦测的目标。\n[0052] 当存在多个快球侦测的目标时,根据快球在各分区里的优先级高低,处理快球侦测的目标。其中,全景拼接摄像机和快球摄像的图像存在重叠区域。在指定的监控位置安装全景拼接摄像机和快球,全景拼接摄像机和快球的安装位置靠近。\n[0053] 例如,可在全景拼接摄像机的正上方,安装快球,以使全景拼接画面中的大部分视野被球机覆盖。\n[0054] 其中,全景拼接摄像机、快球以及联动系统处于同一网络内。\n[0055] 本发明适用于一些重点区域的监控,应用多镜头全景拼接摄像机融合技术、智能快球技术及联动快球技术,实现了超宽屏监控、自动跟踪放大监控、无人操作下自动驱动快球监控的功能,此外,其实现难度低,开发简单、效率高,可移植性强,有利于推广使用。\n[0056] 实施例二\n[0057] 图2是本发明实施例提供的全景拼接画面监控方法中步骤S103的实现流程图,详述如下:\n[0058] 在步骤S201中,判断所述目标是否处于移动状态;\n[0059] 在步骤S202中,当所述目标处于移动状态,控制快球启动跟踪模式,对所述目标进行跟踪;\n[0060] 快球跟踪到目标后,会自动对目标进行放大。在步骤S203中,控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0061] 实施例三\n[0062] 图3是本发明实施例提供的全景拼接画面监控方法中设置快球的实现流程图,详述如下:\n[0063] 在步骤S301中,设置各个所述快球跟踪的最小跟踪面积和最大跟踪面积;\n[0064] 在步骤S302中,设置各个所述快球的初始位置及跟踪区域;\n[0065] 当目标离开快球预先设定的跟踪区域后,控制快球回到设定的初始位置。\n[0066] 在步骤S303中,在所述全景拼接画面中设置分区,同时设置各个所述快球在各分区中的优先级。\n[0067] 其中,如果有1个以上的智能跟踪快球,那每个快球优先对应全景摄像机图像的不同区域。例如全景图像右端有一入口,左端有一出口,快球A优先响应入口,快球B优先响应出口。当入口有两个触发动作时,且出口没触发动作,A先被触发跟踪入口第一个目标,B被触发跟踪入口第二个目标。更多快球时以此类推。\n[0068] 在本实施实施例中,在获取一幅大面积区域的全景拼接画面时,根据目标检测自动触发或者手动触发球机跟踪感兴趣目标,实现全自动和半自动结合。半自动避免全景拼接画面侦测出多个目标时快球跟踪了不感兴趣的目标;全自动大大减少了监控人力的投入,当采用多个快球时,可避免出现多个目标跟踪不过来的情况,提高了全景拼接画面监控的处理效率,有利于推广使用。\n[0069] 实施例四\n[0070] 图4是本发明实施例提供的全景拼接画面监控方法中生成截图的第一实现流程图,详述如下:\n[0071] 在步骤S401中,根据预存储的联动参数,向设定的快球发送控球参数,以控制所述快球移动到指定位置,快速聚焦定位到所述目标;\n[0072] 在步骤S401之前,建立全景摄像机和球机之间的坐标位置映射关系,生成联动参数并存储。\n[0073] 在步骤S402中,控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0074] 实施例五\n[0075] 图5本发明实施例提供的全景拼接画面监控方法中生成截图的第二实现流程图,详述如下:\n[0076] 在步骤S501中,根据目标跟踪框的位置、大小以及预存储的联动参数,生成控球参数;\n[0077] 在步骤S501之前,建立全景摄像机和球机之间的坐标位置映射关系,生成联动参数并存储。\n[0078] 在步骤S502中,向设定的快球发送所述控球参数,以控制所述快球移动到指定位置,快速聚焦定位到所述目标;\n[0079] 在步骤S503中,控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0080] 实施例六\n[0081] 图6是本发明实施例提供的全景无移动侦测及单快球的实现流程图,详述如下:\n[0082] 步骤S601,安装拼接全景摄像机和智能跟踪快球;\n[0083] 步骤S602,设置拼接全景摄像机和智能跟踪快球,并将使调整视角;\n[0084] 步骤S603,进行标定设置;\n[0085] 步骤S604,全景图像上是否存在点击,是执行S605,否则执行S606;\n[0086] 步骤S605,不管快球是否处于跟踪状态,通过联动系统触发快球到目标上,并跟踪新移动事件;\n[0087] 步骤S606,快球检测设置的区域内的移动事件;\n[0088] 步骤S607,判断是否检测到移动事件,是执行步骤S609,否则执行步骤S608;\n[0089] 步骤S608,快球保持预置位状态;\n[0090] 步骤S609,快球自动跟踪移动物体;\n[0091] 步骤S610,抓拍或录像。\n[0092] 其中,安装全景拼接摄像机和快球,两个设备安装位置尽量靠近,并且使全景拼接画面中的大部分视野球机都能覆盖。全景拼接摄像机和快球各自设置好,并且用联动系统联动起来。\n[0093] 全景拼接画面中手动点击任意物体,系统根据联动参数,把控球参数指令发给快球,然后快球随即移动到指定位置,快速聚焦定位到目标位置并自动跟踪拍照保存,并且全景拼接摄像机同时进行抓拍。被侦测物体离开快球的跟踪区域后,快球回到设定的初始位置。\n[0094] 实施例七\n[0095] 图7是本发明实施例提供的全景有移动侦测及单快球的实现流程图,详述如下:\n[0096] 安装全景拼接摄像机和快球,两个设备安装位置尽量靠近,并且使全景拼接画面中的大部分视野球机都能覆盖。全景拼接摄像机和快球各自设置好,并且用联动系统联动起来。\n[0097] 在全景拼接画面中设置感兴趣区域,对感兴趣区域进行视频分析,检测目标。\n[0098] 当全景拼接画面中手动点击任意物体作为目标时,系统根据联动参数,把控球参数指令发给快球,然后快球随即移动到指定位置,快速聚焦定位到目标位置并自动跟踪拍照保存,并且全景拼接摄像机同时进行抓拍。被侦测物体离开快球的跟踪区域后,快球回到设定的初始位置。\n[0099] 当没有上述点击动作时,全景拼接画面中侦测到目标时,根据目标跟踪框的位置、大小,还有联动参数,计算控球参数,球机收到指令后,快速聚焦定位到目标位置并自动跟踪拍照保存,并且全景拼接摄像机同时进行抓拍。被侦测物体离开快球的跟踪区域后,快球回到设定的初始位置。\n[0100] 实施例八\n[0101] 图8是本发明实施例提供的全景无移动侦测及多个快球流程的实现流程图,详述如下:\n[0102] 安装全景拼接摄像机和快球(两个为例),两个设备安装位置尽量靠近,并且使全景拼接画像中的大部分视野球机都能覆盖。全景拼接摄像机和快球各自设置好,并且用联动系统联动起来。\n[0103] 对全景拼接画面进行设置分区,并且设置快球在各分区里的优先级。\n[0104] 当在全景拼接画面中的区域1手动点击任意物体X作为目标时,系统根据联动参数,把控球参数指令发给相应的快球A,然后快球随即移动到指定位置,快速聚焦定位到目标位置并自动跟踪拍照保存,并且全景拼接摄像机同时进行抓拍。被侦测物体离开快球的跟踪区域后,快球回到设定的初始位置。\n[0105] 当在全景拼接画面中的区域2手动点击任意物体X作为目标时,系统根据联动参数,把控球参数指令发给相应的快球B,然后快球随即移动到指定位置,快速聚焦定位到目标位置并自动跟踪拍照保存,并且全景拼接摄像机同时进行抓拍。被侦测物体离开快球的跟踪区域后,快球回到设定的初始位置。A与B快球的跟踪互不干扰。\n[0106] 当在全景拼接画面中的区域1手动点击任意物体X作为目标时,系统根据联动参数,把控球参数指令发给相应的快球A;在A动作还没有做完时,区域1中手动点击任意物体Y,系统根据联动参数,把控球参数指令发给相应的快球B,且抓拍。\n[0107] 被侦测物体都离开快球的跟踪区域后,快球回到设定的初始位置。\n[0108] 实施例九\n[0109] 图9是本发明实施例提供的全景有移动侦测及多个快球的实现流程图,详述如下:\n[0110] 安装全景拼接摄像机和快球(两个为例),两个设备安装位置尽量靠近,并且使全景拼接画像中的大部分视野球机都能覆盖。全景拼接摄像机和快球各自设置好,并且用联动系统联动起来。\n[0111] 对全景拼接画面进行设置分区,并且设置快球在各分区里的优先级。\n[0112] 在全景拼接画面中设置感兴趣区域,对感兴趣区域进行视频分析,检测目标。\n[0113] 当在全景拼接画面中的区域1手动点击任意物体X作为目标时,系统根据联动参数,把控球参数指令发给相应的快球A,然后快球随即移动到指定位置,快速聚焦定位到目标位置并自动跟踪拍照保存,并且全景拼接摄像机同时进行抓拍。被侦测物体离开快球的跟踪区域后,快球回到设定的初始位置。\n[0114] 当在全景拼接画面中的区域2手动点击任意物体X作为目标时,系统根据联动参数,把控球参数指令发给相应的快球B,然后快球随即移动到指定位置,快速聚焦定位到目标位置并自动跟踪拍照保存,并且全景拼接摄像机同时进行抓拍。被侦测物体离开快球的跟踪区域后,快球回到设定的初始位置。A与B快球的跟踪互不干扰。\n[0115] 当在全景拼接画面中的区域1手动点击任意物体X作为目标时,系统根据联动参数,把控球参数指令发给相应的快球A;在A动作还没有做完时,区域1中手动点击任意物体Y,系统根据联动参数,把控球参数指令发给相应的快球B。\n[0116] 当没有上述点击动作时,全景拼接画面中侦测到区域1目标时,根据目标跟踪框的位置、大小,还有联动参数,计算控球参数,球机A收到指令后,快速聚焦定位到目标位置并自动跟踪拍照保存,并且全景拼接摄像机同时进行抓拍。被侦测物体离开快球的跟踪区域后,快球回到设定的初始位置。全景拼接画面中侦测到区域1目标时,根据目标跟踪框的位置、大小,还有联动参数,计算控球参数,球机B收到指令,且抓拍。\n[0117] 被侦测物体都离开快球的跟踪区域后,快球回到设定的初始位置。\n[0118] 图10是本发明实施例提供的快球跟踪后抓拍的效果示意图;\n[0119] 图11是本发明实施例提供的全景摄像机与快球跟踪后同步抓拍的效果示意图;\n[0120] 图12是本发明实施例提供的水平等夹角多镜头方案的全景摄像机侧面示意图;\n[0121] 图13是本发明实施例提供的垂直等距分布等夹角多镜头方案的全景摄像机侧面示意图;\n[0122] 图14是本发明实施例提供的快球示意图;\n[0123] 图15是本发明实施例提供的同时显示两个全景摄像机和快球的截图。\n[0124] 实施例十\n[0125] 图16是本发明实施例提供的全景拼接画面监控装置的结构框图,该装置可以运行于分别连接拼接全景摄像机和快球的设备中,该设备可设在监控区域中,通过将该设备、拼接全景摄像机和快球有机地结合,构成无人值守系统,实现超宽屏监控、自动跟踪放大监控、无人操作下的自动驱动快球监控。\n[0126] 为了便于说明,仅示出了与本实施例相关的部分。\n[0127] 参照图16,该全景拼接画面监控装置,包括:\n[0128] 全景拼接画面获取模块161,用于获取拼接全景摄像机生成的全景拼接画面;\n[0129] 目标检测模块162,用于在所述全景拼接画面中检测目标;\n[0130] 控制模块163,用于当检测到目标时,控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0131] 在本实施例的一种实现方式中,所述控制模块,包括:\n[0132] 移动状态判断单元,用于判断所述目标是否处于移动状态;\n[0133] 目标跟踪单元,用于当所述目标处于移动状态,控制快球启动跟踪模式,对所述目标进行跟踪;\n[0134] 控制单元,用于控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0135] 在本实施例的一种实现方式中,所述装置,还包括:\n[0136] 第一设置模块,用于设置各个所述快球跟踪的最小跟踪面积和最大跟踪面积;\n[0137] 第二设置模块,用于设置各个所述快球的初始位置及跟踪区域;\n[0138] 第三设置模块,用于在所述全景拼接画面中设置分区,同时设置各个所述快球在各分区中的优先级。\n[0139] 在本实施例的一种实现方式中,所述控制模块具体包括:\n[0140] 第一发送单元,用于根据预存储的联动参数,向设定的快球发送控球参数,以控制所述快球移动到指定位置,快速聚焦定位到所述目标;\n[0141] 第一生成单元,用于控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0142] 在本实施例的一种实现方式中,所述控制模块具体包括:\n[0143] 控球参数生成单元,用于根据目标跟踪框的位置、大小以及预存储的联动参数,生成控球参数;\n[0144] 第二发送单元,用于向设定的快球发送所述控球参数,以控制所述快球移动到指定位置,快速聚焦定位到所述目标;\n[0145] 第二生成单元,用于控制快球和所述拼接全景摄像机同时进行抓拍,生成包括所述目标的局部清晰和全局囊括的截图。\n[0146] 本发明实施例提供的装置可以应用在前述对应的方法实施例中,详情参见上述实施例的描述,在此不再赘述。\n[0147] 通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件的方式来实现。所述的程序可以存储于可读取存储介质中,所述的存储介质,如随机存储器、闪存、只读存储器、可编程只读存储器、电可擦写可编程存储器、寄存器等。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件执行本发明各个实施例所述的方法。\n[0148] 以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。
法律信息
- 2018-11-27
- 2016-01-27
实质审查的生效
IPC(主分类): H04N 7/18
专利申请号: 201510464918.6
申请日: 2015.07.31
- 2015-12-30
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有引用任何外部专利数据! |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有被任何外部专利所引用! |