著录项信息
专利名称 | 图像处理装置、用于图像处理装置的设置装置及其方法 |
申请号 | CN201110117616.3 | 申请日期 | 2011-05-06 |
法律状态 | 授权 | 申报国家 | 中国 |
公开/公告日 | 2011-11-16 | 公开/公告号 | CN102244715A |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | H04N5/225 | IPC分类号 | H;0;4;N;5;/;2;2;5;;;H;0;4;N;5;/;2;6;5查看分类表>
|
申请人 | 佳能株式会社 | 申请人地址 | 日本东京都大田区下丸子3-30-2
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | 佳能株式会社 | 当前权利人 | 佳能株式会社 |
发明人 | 亀井洋一 |
代理机构 | 北京怡丰知识产权代理有限公司 | 代理人 | 迟军 |
摘要
本发明提供图像处理装置、用于图像处理装置的设置装置及其方法。所述图像处理装置包括:获取单元,其被构造为获取视频;叠加单元,其被构造为将图像叠加到由所述获取单元获取到的所述视频上;以及检测单元,其被构造为检测物体在由所述获取单元获取到的所述视频上设置的检测区域内的视频中的出现,其中,所述叠加单元将与要在出现时被所述检测单元检测的所述物体的大小相对应的图像,叠加到所述检测区域内的所述视频上,并且将由此得到的视频输出至所述检测单元。
1.一种图像处理装置,该图像处理装置包括:
获取单元,其被构造为获取视频;
读取单元,其被构造为从存储单元中读取操作设置;
叠加单元,其被构造为将图像叠加到由所述获取单元获取到的所述视频上;
检测单元,其被构造为确定物体是否在由所述获取单元获取到的所述视频上设置的检测区域内的视频中出现;以及
确定单元,其被构造为基于所述检测单元执行的确定的结果,来确定所述物体在所述检测区域内的所述视频中的状态,
其中,在所述确定单元确定所述物体的所述状态为放弃状态的情况下,所述叠加单元将与在所述操作设置中指定的大小相对应的图像,叠加到所述检测区域内的所述视频上,并且将由此得到的视频输出至所述检测单元,
其中,在所述检测单元正在检测所述物体在所述检测区域内的所述视频中的出现时,所述叠加单元不开始叠加所述图像,并且
其中,所述检测单元基于所述操作设置来确定所述物体是否在由所述叠加单元叠加了与所指定的大小相对应的所述图像的所述检测区域内的所述视频中出现。
2.根据权利要求1所述的图像处理装置,
其中,在所述确定单元确定为所述物体在所述检测区域内出现、并且保持静止达到预定持续时间的放弃状态的情况下,所述叠加单元将与所述物体的大小相对应的图像,叠加到所述检测区域内的所述视频上,并且将由此得到的视频输出至所述检测单元。
3.根据权利要求1所述的图像处理装置,
其中,在所述确定单元确定为所述检测区域内的所述物体被移除、并且被所述物体遮蔽了的新物体的图像出现的移除状态的情况下,所述叠加单元将与所述检测区域的大小相对应的图像,叠加到所述检测区域内的所述视频上,并且将由此得到的图像输出至所述检测单元。
4.根据权利要求1所述的图像处理装置,其中,所述叠加单元将字符、多边形或椭圆的图像,叠加到由所述获取单元获取到的所述视频上。
5.根据权利要求1所述的图像处理装置,该图像处理装置还包括:
成像单元,
其中,所述获取单元获取由所述成像单元拍摄的视频。
6.一种图像处理装置的设置装置,所述图像处理装置包括获取单元、读取单元、叠加单元、检测单元及确定单元,其中,所述获取单元被构造为获取视频,所述读取单元被构造为从存储单元中读取操作设置,所述叠加单元被构造为将图像叠加到由所述获取单元获取到的所述视频上,所述检测单元被构造为确定物体是否在由所述获取单元获取到的所述视频上设置的检测区域内的视频中出现,所述确定单元被构造为基于所述检测单元执行的确定的结果,来确定所述物体在所述检测区域内的所述视频中的状态,所述设置装置包括:
指示单元,其被构造为指示所述图像处理装置经由所述检测单元来检测所述物体的出现,
其中,所述指示单元指示所述叠加单元进行以下操作:在所述确定单元确定所述物体的所述状态为放弃状态的情况下,将与在所述操作设置中指定的大小相对应的图像,叠加到所述检测区域内的所述视频上,并将由此得到的视频输出至所述检测单元,并且,在所述检测单元正在检测所述物体在所述检测区域内的所述视频中的出现时,不开始叠加所述图像,并且,所述指示单元指示所述检测单元进行以下操作:基于所述操作设置来确定所述物体是否在由所述叠加单元叠加了与所指定的大小相对应的所述图像的所述检测区域内的所述视频中出现。
7.根据权利要求6所述的设置装置,该设置装置还包括:
叠加设置单元,其被构造为设置要由所述叠加单元叠加的所述图像的大小、形状或在所述检测区域中的叠加位置。
8.根据权利要求6所述的设置装置,该设置装置还包括:
参数设置单元,其被构造为设置要由所述叠加单元叠加的所述图像的颜色及暂停持续时间中的至少一者。
9.一种用于图像处理装置的设置装置,所述图像处理装置包括获取单元、读取单元、叠加单元、检测单元及确定单元,其中,所述获取单元被构造为获取视频,所述读取单元被构造为从存储单元中读取操作设置,所述叠加单元被构造为将图像叠加到由所述获取单元获取到的所述视频上,所述检测单元被构造为确定物体是否在由所述获取单元获取到的所述视频上设置的检测区域内的视频中出现,所述确定单元被构造为基于所述检测单元执行的确定的结果,来确定所述物体在所述检测区域内的所述视频中的状态,所述设置装置包括:
显示单元,其被构造为显示用于进行指示所述检测单元确定所述物体是否在所述检测区域内的所述视频中出现的设置的设置画面;
指定单元,其被构造为指定与要在出现时被所述检测单元检测的所述物体的大小相对应的图像的大小;
开始单元,其被构造为指示所述叠加单元开始以下操作:在所述确定单元确定所述物体的所述状态为放弃状态的情况下,将具有由所述指定单元指定的大小的所述图像,叠加到所述检测区域内的所述视频上,并且将由此得到的视频输出至所述检测单元,并且,在所述检测单元正在检测所述物体在所述检测区域内的所述视频中的出现时,不开始叠加所述图像;以及
指示单元,其被构造为指示所述图像处理装置基于所述操作设置来确定所述物体是否在由所述叠加单元叠加了与所指定的大小相对应的所述图像的所述检测区域内的所述视频中出现,
其中,在所述设置画面上提供所述指定单元及所述开始单元。
10.一种图像处理方法,该图像处理方法包括以下步骤:
获取视频;
从存储单元中读取操作设置;
将图像叠加到由获取单元获取到的所述视频上;
确定物体是否在由所述获取单元获取到的所述视频上设置的检测区域内的视频中出现;以及
基于所述确定的结果,来确定所述物体在所述检测区域内的所述视频中的状态,其中,在确定所述物体的所述状态为放弃状态的情况下,将与在所述操作设置中指定的大小相对应的图像,叠加到所述检测区域内的所述视频上,
在正在检测所述物体在所述检测区域内的所述视频中的出现时,不开始叠加所述图像,并且
基于所述操作设置来确定所述物体是否在叠加了与所指定的大小相对应的所述图像的所述检测区域内的所述视频中出现。
11.一种由设置装置用来设置图像处理装置的方法,所述图像处理装置包括获取单元、读取单元、叠加单元、检测单元及确定单元,其中,所述获取单元被构造为获取视频,所述读取单元被构造为从存储单元中读取操作设置,所述叠加单元被构造为将图像叠加到由所述获取单元获取到的所述视频上,所述检测单元被构造为确定物体是否在由所述获取单元获取到的所述视频上设置的检测区域内的视频中出现,所述确定单元被构造为基于所述检测单元执行的确定的结果,来确定所述物体在所述检测区域内的所述视频中的状态,并且,其中,所述设置装置包括指示单元,该指示单元被构造为指示所述图像处理装置经由所述检测单元来检测所述物体的出现,所述方法包括以下步骤:
通过所述指示单元,指示所述叠加单元进行以下操作:在所述确定单元确定所述物体的所述状态为放弃状态的情况下,将与在所述操作设置中指定的大小相对应的图像,叠加到所述检测区域内的所述视频上,并且将由此得到的视频输出至所述检测单元,并且,在所述检测单元正在检测所述物体在所述检测区域内的所述视频中的出现时,所述叠加单元不开始叠加所述图像,并且
指示所述检测单元进行以下操作:基于所述操作设置来确定所述物体是否在叠加了与所指定的大小相对应的所述图像的所述检测区域内的所述视频中出现。
图像处理装置、用于图像处理装置的设置装置及其方法\n技术领域\n[0001] 本发明涉及用于通过图像处理来分析视频中的改变的图像处理装置、用于图像处理装置的设置装置及其方法。\n背景技术\n[0002] 公知的传统成像(imaging)系统检测由摄像机拍摄到的视频中的改变。为了检测由这种成像系统拍摄到的视频中的改变,用户须要预设用于执行检测处理的参数,诸如经历检测处理的画面区域、待检测对象在检测区域中的位置及大小、以及图像处理的灵敏度等。根据待检测对象的位置、大小、颜色、周围的环境、以及摄像机的图像拍摄条件,来设置上述各参数。\n[0003] 通过传统的成像系统,以下面的方式来设置用于执行检测处理的参数。用户预先拍摄待检测物体的运动以及周围的环境,并且将拍摄到的视频,经由摄像机服务器存储在操作终端内的存储单元中。然后,用户在回放存储在操作终端内的存储单元中的视频的同时,来设置用于检测处理的参数(例如,参见日本专利申请特开2004-248090号公报)。\n[0004] 通过公知的图像处理装置,在由摄像机拍摄到的视频中,指定经历检测处理的范围。用户在显示视频的显示器上绘制图案,以设置检测范围,并且在显示器上确定范围设置的结果(例如,参见日本专利申请特开2008-16898号公报)。\n[0005] 为了设置用于执行检测处理的参数,有必要预先通过使用成像装置,来拍摄要作为视频中的改变来检测的物体的状态,以及周围的环境,并且验证是否基于设置的参数正确执行了检测处理。当设置用于执行检测处理的参数时,传统的成像系统需要人力及作业,以通过使用摄像机来拍摄待检测物体的状态以及周围的环境。\n发明内容\n[0006] 本发明涉及如下的图像处理装置,该图像处理装置与传统的成像系统相比,减少了设置用于执行检测处理的参数所必需的人力及操作。\n[0007] 根据本发明的一个方面,提供了一种图像处理装置,该图像处理装置包括:获取单元,其被构造为获取视频;叠加单元,其被构造为将图像叠加到由所述获取单元获取到的所述视频上;以及检测单元,其被构造为检测物体在由所述获取单元获取到的所述视频上设置的检测区域内的视频中的出现,其中,所述叠加单元将与要在出现时被所述检测单元检测的所述物体的大小相对应的图像,叠加到所述检测区域内的所述视频上,并且将由此得到的视频输出至所述检测单元。\n[0008] 当设置用于执行检测视频中的改变的处理的参数时,根据本发明的图像处理装置将图像叠加到经历检测处理的范围内的视频上,以再现待检测物体的状态。因此,不需要人来到摄像机处并移动待检测物体以产生待检测物体的状态。这使得能够减少设置用于执行检测处理的参数所必需的人力及操作。\n[0009] 通过以下参照附图对示例性实施例的详细描述,本发明的其他特征和方面将变得清楚。\n附图说明\n[0010] 被并入说明书并构成说明书的一部分的附图,例示了本发明的示例性实施例、特征及方面,并且与文字描述一起用来说明本发明的原理。\n[0011] 图1A及图1B是例示图像处理装置的结构的框图。\n[0012] 图2是例示图像处理装置的操作的流程图。\n[0013] 图3A及图3B例示了由图像处理装置的叠加单元叠加的示例性图像。\n[0014] 图4是例示设置装置的结构的框图。\n[0015] 图5例示了设置装置的设置画面。\n[0016] 图6A及图6B是例示设置装置的操作的流程图。\n[0017] 图7A、图7B及图7C例示了当执行验证时在设置装置上显示的窗口的状态。\n具体实施方式\n[0018] 下面,将参照附图,来详细描述本发明的各种示例性实施例、特征及方面。以下示例性实施例中所示的结构应当被视为示例,并且,本发明不局限于此。\n[0019] 下面,将参照图1A、图1B、图2、图3A及图3B,来描述根据本发明的第一示例性实施例的图像处理装置。图1A是例示根据本发明的第一示例性实施例的图像处理装置的结构的框图。在图像被接收到时,图像处理装置100输出输入图像的压缩图像及分析结果。\n[0020] 获取单元110由诸如连接至图像处理装置100的视频摄像机及视频记录器的成像装置180,摄取连续图像作为视频。获取单元110根据来自控制单元160(稍后描述)的指令,来执行模拟/数字(A/D)转换,并且将视频输出至叠加单元120。获取单元110以此种方式实现获取视频的功能。\n[0021] 根据来自控制单元160(稍后描述)的指令,叠加单元120将图像叠加到由获取单元110获取到的视频上。要叠加到视频上的图像是例如表示时间信息的字符串、填充有某种颜色的多边形或椭圆、单独拍摄和存储的图像、或者计算机图形图像。\n[0022] 可以通过现有的如下绘制功能来构造叠加单元120,所述绘制功能有将字符或图案叠加到图像上的叠加功能,以及将掩模图像叠加到预定图像上进行隐私保护的隐私掩模功能。\n[0023] 在经历检测单元131(稍后描述)执行的物体检测的预设区域(以下称为“检测区域”)中,叠加单元120向视频上叠加与被检测单元131检测为出现的物体的大小相对应的图像。叠加单元120将叠加有图像的视频,发送至分析单元130及压缩单元150。\n[0024] 压缩单元150基于由来自控制单元160(稍后描述)的指令指定的压缩方法及压缩率,来对图像进行压缩,并且经由接口(I/F)单元140,将压缩图像输出至图像处理装置\n100的外部。压缩方法基于动态JPEG(Motion JPEG)、MPEG4、H.264及JPEG标准。\n[0025] 分析单元130通过使用帧间差分法或背景差分法,在图像上的预设区域中检测物体的出现,并且确定物体的状态。如图1B所示,分析单元130包括检测单元131及确定单元132。检测单元131检测物体在由获取单元110获取到的视频上设置的检测区域内的视频中的出现。基于检测单元131的检测结果,确定单元132确定检测区域内的视频中的物体的状态。\n[0026] 示例性的物体状态“放弃”是指如下的状态,即物体在检测区域内出现,并且在相同位置保持静止达到预设持续时间或更久。另一示例性的物体状态“移除”是指如下的状态,即监视对象被移除,然后,诸如被监视对象遮蔽的墙壁或地板表面等的新物体出现,并且保持静止达到预设持续时间或更久。\n[0027] 检测单元131基于帧间差分法及背景差分法,来检测物体的出现。这些技术获得例如帧间的亮度等的差分,并且将差分等于或大于预设阈值的区域,识别作为出现的物体。\n[0028] 在被检测单元131检测为出现的物体保持静止达到预定持续时间的情况下,确定单元132确定该物体处于“放弃”状态。在检测区域内的物体被移除、并且检测单元131检测到被该物体遮蔽的新物体出现的情况下,确定单元132确定该物体处于“移除”状态。\n[0029] 如前所述,通过获得帧间的亮度的差分,来实现物体检测,并且,将差分超过预设阈值的区域,识别作为出现的物体。因此,即使当视频中实际上没有物体出现时,通过向视频中的某一部分给予人工的亮度差分,也使得该部分能够被检测为物体。\n[0030] 本示例性实施例使用该技术,来执行物体状态分析的验证。具体来说,控制单元\n160指示叠加单元120向输入图像上,叠加相当于出现的物体的图案,以生成亮度差分。然后,控制单元160指示分析单元130将差分检测为“放弃”或“移除”状态。使用存储在存储单元170(稍后描述)中的各种设置,作为用于检测“放弃”或“移除”状态的条件。因此,分析单元130进行如下的确定,即包含由叠加单元120叠加的图像的视频,是否满足存储在存储单元170中的条件。\n[0031] 虽然在下面,将基于分析单元130分析“放弃”及“移除”的情况,来描述本示例性实施例,但是,本发明不局限于此,并且可以是基于在设置的区域中检测出现的物体、并分析物体的状态的任何功能的。例如,本发明可以分析如下的情况,即监视对象因为摄像机被布或颜料遮蔽,而消失达到预定持续时间。图像处理装置100经由I/F单元140输出分析结果。\n[0032] 存储单元170存储获取单元110、叠加单元120、分析单元130及压缩单元150的操作设置。获取单元110、叠加单元120、分析单元130及压缩单元150保持各自的操作设置。获取单元110的操作设置,包括例如获取到的图像的大小转换中的转换倍率及转换后的大小的设置。\n[0033] 叠加单元120的操作设置,包括例如要叠加到输入图像上的图案的形状、大小及范围,以及要叠加于上面的图案的颜色及暂停持续时间的设置。\n[0034] 当暂停持续时间是t秒时,图案被保持叠加在直到t秒后的某帧为止的各帧上。当检测到物体的“放弃”时,虽然一般可以叠加黑色图像,但是,依据具体情形(诸如夜间在室外拍摄视频)而定,可能无法获得足够的亮度差分。因此,可以将与物体的颜色明显不同的颜色(例如,相反颜色),设置作为待叠加图像的颜色,以确保放弃的检测。\n[0035] 另一方面,当检测物体的移除时,一般可以叠加黑色图案。然而,为了提高验证的准确性,还可以将在监视对象被放弃之后出现的墙壁或地板表面的颜色,设置作为待叠加颜色。由于墙壁或地板表面经常在检测区域周围出现,因此,可以将检测区域外缘的颜色或者类似颜色,选择作为待叠加颜色。\n[0036] 分析单元130的操作设置,包括例如物体状态分析类型(“放弃”及“移除”)、经历物体检测的画面区域、监视对象的大小、监视对象的暂停持续时间、以及检测灵敏度的设置。然而,操作设置不局限于此。此外,并非上述所有操作设置都须要设置。\n[0037] 暂停持续时间是指物体在检测区域中出现并保持静止的时间间隔。当物体保持静止达到预设持续时间时,分析单元130的确定单元132确定发生“放弃”或“移除”。\n[0038] 下面,将描述检测灵敏度。分析单元130的检测单元131在相邻视频帧中的相同像素位置处,来比较像素间的亮度差分。当差分等于或大于设置的检测灵敏度时,分析单元\n130的检测单元131确定相关像素发生改变。因此,分析单元130的操作设置被分析单元\n130用作用于检测物体在检测区域内的视频中的出现、并确定物体状态的条件。\n[0039] 压缩单元150的操作设置,包括例如输入至压缩单元150的图像的压缩方法及压缩率的设置。\n[0040] 控制单元160经由I/F单元140接收来自用户终端的指令,控制获取单元110、叠加单元120、分析单元130及压缩单元150的操作,并且向用户返回响应。由控制单元160中包括的处理器及存储器,来执行上述控制操作。\n[0041] 控制单元160中包括的处理器是如下的计算机,该计算机从控制单元160中包括的存储器中读取程序,然后执行该程序。控制单元160中包括的存储器是如下的记录介质,该记录介质存储程序以供处理器读取。稍后将参照图2来描述上述程序。\n[0042] 在下文中,将把验证分析单元130的操作的指令,以及保持设置的指令,描述作为由控制单元160接收到的用户指令。\n[0043] 验证分析单元130的操作的指令,是指示图像处理装置100验证分析单元130是否基于存储在存储单元170中的操作设置来检测“放弃”及“移除”状态的指令。在验证分析单元130的操作的指令被接收到时,控制单元160对叠加单元120,来执行由分析单元130的设置导出的控制。\n[0044] 保持设置的指令是如下的指令,即指示图像处理装置100保持获取单元110、叠加单元120、分析单元130及压缩单元150的操作设置。在保持设置的指令被接收到时,控制单元160在存储单元170中,来存储获取单元110、叠加单元120、分析单元130及压缩单元\n150的操作设置。使用存储的操作设置,作为要在未从用户接收到控制指令时执行的各单元的默认操作。\n[0045] I/F单元140经由网络(未例示)与用户终端相连接,以在图像处理装置100与用户之间以及图像处理装置100与设置装置(稍后描述)之间,来交换信息,其中,所述设置装置设置图像处理装置100的各单元的各种操作设置。I/F单元140将控制指令从用户传送至控制单元160,并且向用户返回来自分析单元130的分析结果、来自压缩单元150的压缩数据,以及来自控制单元160的响应。\n[0046] 下面,将参照图2,来描述由按上述方式构造的图像处理装置100执行的用于验证分析单元130的操作的处理。图2例示了当验证分析单元130的操作时、由控制单元160中包括的处理器执行的程序的过程。\n[0047] 在步骤S200中,在从用户终端接收到验证分析单元130的操作的指令时,控制单元160从存储单元170中,来读取分析单元130的设置。\n[0048] 例如,控制单元160读取如下的设置,诸如物体状态分析类型(“放弃”及“移除”)、经历物体检测的画面区域、监视对象的大小、以及直到相关状态被确定为止的暂停持续时间等。\n[0049] 在步骤S201中,控制单元160从读取自存储单元170的设置中,来确定状态(“放弃”或“移除”)。处理进入到与检测出的状态相对应的步骤S202或S203,以向分析单元130设置各自的设置值。\n[0050] 在“放弃”状态的情况下(步骤S201:放弃),处理进入到步骤S202。在步骤S202中,控制单元160将叠加单元120,设置为向检测区域内的视频上,叠加与经历放弃检测的物体的大小及颜色相对应的图像。具体来说,控制单元160将从存储单元170中读取出的检测区域内的位置,设置作为要叠加图像的位置,并且将从存储单元170中读取出的大小及颜色,设置作为待叠加图像的大小及颜色。\n[0051] 另一方面,在“移除”状态的情况下(步骤S201:移除),处理进入到步骤S203。在步骤S203中,控制单元160将叠加单元120,设置为向检测区域内的视频上,叠加与检测区域的大小相对应的图像。具体来说,控制单元160将检测区域的大小及位置,设置作为要叠加图像的位置及大小,并且将从存储单元170中读取出的颜色,设置作为待叠加图像的颜色。\n[0052] 在步骤S204中,在待叠加图像的设置值被确定之后,控制单元160确定是否能够进行验证。例如,在分析单元130生成背景图像之前,不能开始验证。控制单元160向分析单元130,来询问分析单元130是否被启动。\n[0053] 当分析单元130未被启动时,控制单元160可以指示分析单元130启动,并且进行等待,直到分析单元130生成背景图像为止。作为另一选择,控制单元160可以在用户指示分析单元130启动之后进行等待,直到分析单元130生成背景图像为止。例如,用户利用在设置装置的显示单元上显示的开始分析按钮,来指示分析单元130启动。作为另一选择,当开始图2中所示的验证处理时,分析单元130可能已经被启动。\n[0054] 如前所述,通过获得帧间的亮度的差分,来实现物体检测,并且,将差分超过预设阈值的区域,识别作为出现的物体。因此,当在验证时检测区域内已经出现实际的物体时,分析单元130不能区别由叠加单元120叠加的图像与实际的物体。因此,在检测单元131正在检测检测区域内的视频中是否出现物体的同时,叠加单元120不开始叠加图像。在开始验证之前,检测单元131可以由分析单元130的分析结果,来确定在检测区域内是否出现物体。\n[0055] 当能够开始验证时(步骤S204:是),处理进入到步骤S205。在步骤S205中,控制单元160指示分析单元130开始分析从叠加单元120输入的图像。\n[0056] 在步骤S206中,控制单元160控制叠加单元120基于在步骤S202或S203中确定的设置值,来向从获取单元110输入的视频上叠加图像。要向视频上叠加的图像依赖于叠加单元120的功能。\n[0057] 例如,当叠加单元120是利用隐私掩模功能构造的时,叠加单元120绘制填充有某种颜色的多边形或圆形。当叠加单元120是利用叠加功能构造的时,叠加单元120根据通过绘制参数确定的绘制位置及形状,来叠加字符串。\n[0058] 如果在这种情况下字符或字体不能改变,则还优选连续地放置笔画数多的汉字或者比例字体中的“I”(大写字母)。图3A及图3B各自例示了示例性的图像叠加。\n[0059] 图3A例示了在“放弃”状态的情况下、通过使用隐私掩模功能进行的多边形310的叠加。图3B例示了在“移除”状态的情况下、通过使用叠加功能进行的字符串330的叠加。\n示出了框300以进行描述,而实际中并没有绘制该框。\n[0060] 在步骤S207中,在叠加单元120开始叠加图像之后,控制单元160确定是否经过了在步骤S200中读取出的待叠加对象的暂停持续时间。当经过了暂停持续时间时(步骤S207:是),处理进入到步骤S208。在步骤S208中,控制单元160指示叠加单元120结束图像的叠加。\n[0061] 在步骤S209中,控制单元160控制分析单元130经由I/F单元140,来向用户终端通知由叠加单元120叠加了图像的视频的分析结果。\n[0062] 控制单元160通过上述方式,来控制叠加单元120及分析单元130的操作。\n[0063] 虽然在本示例性实施例中,图像处理装置100与成像装置180是相独立的装置,但是,图像处理装置100也可以与视频摄像机或视频记录器相整合,并且从获取单元110接收由此类成像装置中的任何装置拍摄的连续图像。\n[0064] 视频摄像机可以是位于远程站点的网络摄像机,该网络摄像机使得能够经由网络进行远程视频观察。\n[0065] 根据本示例性实施例的图像处理装置100,使得能够验证通过图像处理来分析物体状态转变的功能,而不必移动实际的监视对象。因此,图像处理装置100消除了在视频拍摄现场作业的需要,从而削减了进行验证所需的人力及时间。\n[0066] 当将本示例性实施例应用于监视摄像机时,可以通过监视摄像机的叠加功能及隐私掩模功能,来实现叠加单元120,从而与单独实施这些功能的情况相比,能够以较低的成本来构造图像处理装置。\n[0067] 下面,将围绕如下的设置装置,来描述第二示例性实施例,所述设置装置对第一示例性实施例中所述的图像处理装置100,来设置各种设置值,并且指示图像处理装置100经由检测单元131,来检测物体的出现。\n[0068] 下面,将参照图4、图5、图6A及图6B,来描述根据本发明的第二示例性实施例的设置装置。\n[0069] 图4是例示根据本发明的第二示例性实施例的设置装置的结构的框图。设置装置\n400是如下的终端,其接收来自用户的设置及指令,并且将指令输出至执行物体状态分析的图像处理装置,例如,根据本发明的第一示例性实施例的图像处理装置100。物体状态分析是指例如分析在输入视频中,物体是处于“放弃”状态还是处于“移除”状态。\n[0070] I/F单元410是如下的接口,其位于根据第二示例性实施例的设置装置400与执行物体状态分析的图像处理装置100之间。I/F单元410经由网络(未例示)向设置装置\n400输出与物体状态分析的验证相关的、用户输入的设置及指令,作为针对执行物体状态分析的图像处理装置100的功能的设置及指令。\n[0071] 分析设置控制单元420确定分析区域设置单元430及分析参数设置单元440(稍后描述)执行的、与物体状态分析相关的设置及指令的输入的结束,将输入的设置及指令转换为适合于执行物体状态分析的图像处理装置100的设置及指令,并且将转换后的设置及指令经由I/F单元410输出至设置装置400的外部。\n[0072] 与物体状态分析相关的设置,包括例如物体状态分析类型、经历物体状态分析的物体的大小范围、以及直到发生物体状态转变为止的物体暂停持续时间的设置。\n[0073] 与物体状态分析相关的指令,包括例如完成物体状态分析的设置、然后将设置发送至执行物体状态分析的图像处理装置100的指令,以及结束设置装置400的操作的指令。\n[0074] 由分析设置控制单元420中包括的处理器及存储器,来执行上述控制操作。分析设置控制单元420中包括的处理器是如下的计算机,该计算机从分析设置控制单元420中包括的存储器中读取程序,然后执行该程序。\n[0075] 分析设置控制单元420中包括的存储器是如下的记录介质,该记录介质存储程序以供处理器读取。稍后将参照图6A来描述上述程序。分析设置控制单元420可以与验证控制单元450(稍后描述)相整合。\n[0076] 分析区域设置单元430提供如下的用户接口,该用户接口使得用户能够设置经历物体状态分析的画面区域。\n[0077] 分析参数设置单元440提供如下的用户接口,该用户接口使得用户能够设置与物体状态分析相关的参数。与物体状态分析相关的参数,包括例如与经历物体状态分析的物体的大小范围相关的参数,以及与直到确定发生物体状态转变为止的物体暂停持续时间相关的参数。\n[0078] 验证控制单元450确定叠加设置单元460及验证参数设置单元470执行的、与物体状态分析的验证相关的设置及指令的输入的结束,将输入的设置及指令转换为适合于执行物体状态分析的图像处理装置100的设置及指令,并且将转换后的设置及指令经由I/F单元410输出至设置装置400的外部。\n[0079] 与物体状态分析的验证相关的设置,包括例如分析区域、要作为用于验证的伪物体被叠加的图案的形状、大小及范围、待叠加图案的颜色及暂停持续时间、以及进行验证的物体状态分析的选择的设置。\n[0080] 与物体状态分析的验证相关的指令,包括例如完成物体状态分析的验证的设置、然后将设置发送至执行物体状态分析的图像处理装置100的指令,以及基于设置的条件来检测物体的出现的指令。\n[0081] 具体来说,与物体状态分析的验证相关的指令,指示将与要在出现时被检测的物体的大小相对应的图像,作为用于验证的伪物体,叠加到检测区域内的视频上,将由此得到的视频输出至图像处理装置100的检测单元131,以及检测物体的出现。\n[0082] 由验证控制单元450中包括的处理器及存储器,来执行上述控制操作。验证控制单元450中包括的处理器是如下的计算机,该计算机从验证控制单元450中包括的存储器中读取程序,然后执行该程序。\n[0083] 验证控制单元450中包括的存储器是如下的记录介质,该记录介质存储程序以供处理器读取。稍后将参照图6B来描述上述程序。验证控制单元450可以与分析设置控制单元420相整合。\n[0084] 叠加设置单元460是如下的用户接口,其使得用户能够设置要由执行物体状态分析的图像处理装置100的叠加单元120叠加的图像的大小、形状、叠加位置及范围,用于进行物体状态分析的验证。\n[0085] 验证参数设置单元470提供如下的用户接口,该用户接口使得用户能够设置进行物体状态分析的验证的参数。进行物体状态分析的验证的参数,包括例如与待叠加图像的颜色及暂停持续时间相关的参数。\n[0086] 用户使用切换单元480,来指示与设置装置400相连接的图像处理装置100执行物体状态分析或者物体状态分析的验证。物体状态分析的验证,是指验证当执行物体状态分析的图像处理装置100基于在验证控制单元450中设置的条件、来实际执行物体状态分析时,期望的物体状态是否能够被检测到。\n[0087] 下面,将基于设置装置400包括显示单元495、并且该显示单元495显示设置画面\n500、以用于执行指示图像处理装置100的检测单元131(见第一示例性实施例中所述)检测物体的出现的设置的情况,来描述本示例性实施例。\n[0088] 在显示单元495上显示的设置画面500,充当图形用户界面(以下称为“GUI”)。\n设置装置400包括显示控制单元490,该显示控制单元490指示显示单元495显示设置画面\n500。由显示控制单元490中包括的处理器及存储器,来显示设置画面500。\n[0089] 显示控制单元490中包括的处理器是如下的计算机,该计算机从显示控制单元\n490中包括的存储器中读取程序,然后执行该程序。显示控制单元490中包括的存储器是如下的记录介质,该记录介质存储程序以供处理器读取。\n[0090] 下面,将参照图5,来描述在根据第二示例性实施例的设置装置400的显示单元\n495上显示的设置画面500(图形用户界面)的示例性画面结构。\n[0091] 使用单选按钮505,以在物体状态分析与物体状态分析的验证之间切换目标设置。\n依据单选按钮505的设置,切换单元480选择图像处理装置100将执行物体状态分析,还是执行物体状态分析的验证。\n[0092] 使用图案输入区510,来设置经历物体状态分析的画面区域(以下将该区域称为“分析区域”),以及设置进行物体状态分析的验证的图案。根据单选按钮505的设置,来选择目标设置。具体来说,当物体状态分析的单选按钮505被选择时,用户能够在图案输入区\n510中设置分析区域。\n[0093] 另一方面,当物体状态分析的验证的单选按钮505被选择时,用户能够在图案输入区510中设置图像或伪物体。由执行用于进行物体状态分析的验证的物体状态分析的图像处理装置100,来叠加设置的图像或伪物体。\n[0094] 使用绘制工具选择选项板525,来选择绘制工具(矩形、椭圆、直线等),以及设置图案输入区510内的分析区域或伪物体的位置及形状。多边形框515是示例性的分析区域,伪物体520是示例性的待叠加图像。\n[0095] 当物体状态分析的单选按钮505被选择时,分析区域设置单元430根据来自绘制工具选择选项板525的输入,来设置经历物体状态分析的画面区域。\n[0096] 当物体状态分析的验证的单选按钮505被选择时,叠加设置单元460根据来自绘制工具选择选项板525的输入,来设置待叠加图像的大小、形状、叠加位置及范围。\n[0097] 因此,绘制工具选择选项板525用作指定单元,其指定与如下的物体的大小相对应的图像,所述物体要在出现时被根据第一示例性实施例的图像处理装置100的检测单元\n131检测。\n[0098] 使用参数输入区530,来输入物体状态分析的验证的参数。参照图5,用户向参数输入区530设置RGB值,以指定要通过使用绘制工具选择选项板525在图案输入区510中绘制的图案的颜色。\n[0099] 当执行物体状态分析的验证时,用户能够调整要通过使用参数输入区530输入的图案的颜色。因此,用户能够验证什么样的物体颜色使得能够进行物体状态分析。\n[0100] 此外,用户可以设置通过使用参数输入区530输入的图案的暂停持续时间。用户可以根据需要,使用输入图案的暂停持续时间来验证物体状态分析。因此,用户能够验证待检测物体保持静止的多长的暂停持续时间,使得能够进行物体状态分析。\n[0101] 从参数输入区530输入的参数,不局限于与输入图案的颜色及暂停持续时间相关的参数。验证参数设置单元470根据来自参数输入区530的输入,来设置物体状态分析的验证的参数。\n[0102] 用户使用“结束”按钮535,来给出结束设置装置400的操作的指令。\n[0103] 用户使用类型选择按钮540,来选择物体状态分析的类型(“放弃”或“移除”)。\n[0104] 用户使用物体大小输入区545,来指定经历物体状态分析的物体的大小范围。用户使用暂停持续时间输入区550,来指定经历物体状态分析的物体保持静止、直到确定发生物体状态转变(“放弃”或“移除”)为止的持续时间。\n[0105] 分析参数设置单元440根据来自物体大小输入区545及暂停持续时间输入区550的输入,来设置与物体状态分析相关的参数。\n[0106] 存储设置按钮555指示设置装置400完成物体状态分析的设置,然后将设置发送至执行物体状态分析的图像处理装置100。\n[0107] 开始验证按钮560指示设置装置400完成物体状态分析的验证的设置,然后将设置发送至执行物体状态分析的图像处理装置100,以指示图像处理装置100开始验证。开始验证按钮560用作开始单元,其指示根据第一示例性实施例的图像处理装置100的叠加单元120开始将通过绘制工具选择选项板525指定的图像,叠加到检测区域内的视频上,然后将由此得到的视频输出至检测单元131。\n[0108] 下面,将参照图6A及图6B,来描述由按上述方式构造的设置装置400执行的处理的操作流程。图6A例示了由分析设置控制单元420中包括的处理器执行的程序的过程。图\n6B例示了由验证控制单元450中包括的处理器执行的程序的过程。\n[0109] 下面,将参照图6A,来描述由分析设置控制单元420执行的处理。在步骤S600中,在设置装置400启动之后,分析设置控制单元420确定分析区域设置单元430是否接收经历物体状态分析的画面区域的设置,并且,当相关设置被输入时,分析设置控制单元420执行诸如转换为内部值等的必要输入处理。\n[0110] 在步骤S601中,分析设置控制单元420进一步确定分析参数设置单元440是否接收到分析参数,并且,当相关设置被输入时,分析设置控制单元420执行诸如转换为内部值等的必要输入处理。分析设置控制单元420重复上述处理,直到用户完成设置处理为止。\n具体来说,在步骤S602中,分析设置控制单元420确定例如用户是否按下了存储设置按钮\n555。\n[0111] 当用户完成设置处理时(步骤S602:是),处理进入到步骤S603。在步骤S603中,分析设置控制单元420经由I/F单元410,将设置发送至执行物体状态分析的图像处理装置\n100,以便存储为设置值。然后,分析设置控制单元420启用与验证设置相关的界面。在步骤S604中,分析设置控制单元420确定用户是否给出结束设置处理的指令,例如,用户是否按下了“结束”按钮535。当用户给出结束设置处理的指令时(步骤S604:是),处理结束。\n[0112] 当用户未给出结束设置处理的指令时(步骤S604:否),处理进入到步骤S605。在步骤S605中,分析设置控制单元420指示验证控制单元450进行如下的确定,即目标设置是物体状态分析,还是物体状态分析的验证。\n[0113] 下面,将参照图6B,来描述由验证控制单元450执行的处理。在步骤S606中,在从分析设置控制单元420接收到前述指令时,验证控制单元450检查单选按钮505的设置,以确定目标设置是物体状态分析,还是物体状态分析的验证。\n[0114] 当目标设置是物体状态分析时(步骤S606:否),处理进入到步骤S607。在步骤S607中,验证控制单元450禁用与验证设置相关的界面。然后,处理返回到步骤S600。在步骤S600中,验证控制单元450指示分析设置控制单元420输入物体状态分析的设置。\n[0115] 另一方面,当目标设置是物体状态分析的验证时(步骤S606:是),处理进入到步骤S608。在步骤S608中,验证控制单元450确定叠加设置单元460是否接收到待叠加图案的形状的设置,并且,当相关设置被输入时,验证控制单元450执行诸如转换为内部值等的必要输入处理。然后,验证控制单元450重复上述处理,直到用户完成设置处理为止。具体来说,在步骤S609中,验证控制单元450确定例如用户是否按下了开始验证按钮560。\n[0116] 当用户完成设置处理时(步骤S609:是),处理进入到步骤S610。在步骤S610中,验证控制单元450将设置作为图像叠加指令,经由I/F单元410发送至执行物体状态分析的图像处理装置100。然后,连接至设置装置400的图像处理装置100,通过叠加图案(伪物体)开始验证。在叠加完成时,处理返回到步骤S606。验证控制单元450重复从步骤S606起的处理。\n[0117] 当图像处理装置100开始验证时,验证状态被显示在显示单元495上。下面,将参照图7A至图7C,来描述示例性的验证状态。显示窗口600显示从图像处理装置100输出的图像。显示窗口600显示在设置装置400的显示单元495上。\n[0118] 当图像处理装置100开始验证时,表示分析区域的框515显示在显示窗口600内,如图7A所示。然而,不是必须要显示框515。\n[0119] 然后,如图7B所示,显示窗口600显示如下的状态,即由图像处理装置100的叠加单元120,将在设置装置400中设置的伪物体520,叠加到了拍摄的图像上。\n[0120] 然后,如图7C所示,显示窗口600显示如下的状态,即从叠加单元120输出的图像经过分析单元130的分析,然后被检测为物体状态转变。当物体状态转变被检测出时,显示窗口600在被检测的物体周围显示粗框610。\n[0121] 显示窗口600还显示消息615,以表示检测出物体状态转变。虽然在图7C中,例示了发生物体状态转变的物体被粗框610包围的状态,但是,框不局限于此,并且也可以是彩色框。\n[0122] 不是必须要显示消息615。例如,图像处理装置100可以向用户通知表示检测出物体状态转变的电子邮件消息。\n[0123] 如上所述,根据本发明的图像处理系统,使得能够验证物体状态转变的检测。\n[0124] 虽然在示例性实施例中,图像处理装置100与设置装置400是相独立的装置,但是,所述两装置可以被整合为一个装置。\n[0125] 根据本示例性实施例的设置装置400,使得能够验证通过图像处理来分析物体状态转变的功能,同时以各种方式来改变图案(伪物体)。设置装置400消除了准备大量实际监视对象的需要。设置装置400使得即使当不能分析状态转变时,也能够重复验证,同时即时改变分析设置,从而削减了广泛验证所需的人力及时间。\n[0126] 还可以由读出并执行记录在存储设备上的程序来执行上述实施例的功能的系统或装置的计算机(或者诸如CPU或MPU等的设备),来实现本发明的各方面;并且可以利用由通过例如读出并执行记录在存储设备上的程序来执行上述实施例的功能的系统或装置的计算机来执行各步骤的方法,来实现本发明的各方面。为此,例如经由网络或从充当存储设备的各种类型的记录介质(例如,计算机可读介质)将程序提供给计算机。在这种情况下,系统或装置以及存储有程序的记录介质被包括在本发明的范围之内。\n[0127] 虽然参照示例性实施例对本发明进行了描述,但是应当理解,本发明并不局限于所公开的示例性实施例。应当对所附权利要求的范围给予最宽的解释,以使其涵盖所有的变形例、等同结构及功能。
法律信息
- 2015-07-22
- 2012-02-08
实质审查的生效
IPC(主分类): H04N 5/225
专利申请号: 201110117616.3
申请日: 2011.05.06
- 2011-11-16
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 |
1
| |
2009-05-06
|
2008-11-03
| | |
2
| |
2003-01-15
|
2002-06-12
| | |
3
| |
2008-12-17
|
2008-06-16
| | |
4
| | 暂无 |
2005-01-31
| | |
5
| |
2008-01-30
|
2007-07-23
| | |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有被任何外部专利所引用! |