著录项信息
专利名称 | 跟踪对焦方法及装置 |
申请号 | CN201410669930.6 | 申请日期 | 2014-11-20 |
法律状态 | 暂无 | 申报国家 | 中国 |
公开/公告日 | 2016-06-08 | 公开/公告号 | CN105657238A |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | H04N5/232 | IPC分类号 | H;0;4;N;5;/;2;3;2查看分类表>
|
申请人 | 广东欧珀移动通信有限公司 | 申请人地址 | 广东省东莞市长安镇乌沙海滨路18号
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | OPPO广东移动通信有限公司 | 当前权利人 | OPPO广东移动通信有限公司 |
发明人 | 怀效宁;凌佳宁;孙剑波;张科武 |
代理机构 | 广州三环专利商标代理有限公司 | 代理人 | 郝传鑫;熊永强 |
摘要
本发明实施例公开了一种跟踪对焦方法,包括:跟踪目标依次获取图像帧,所述图像帧中包含目标跟踪区域;计算所述目标跟踪区域的大小参数的变化值和对焦评价值的变化值;根据所述大小参数变化值和对焦评价值变化值计算马达转动步长;根据所述马达转动步长生成马达控制指令进行对焦。本发明实施例还公开了一种跟踪对焦装置。采用本发明,可加快自动对焦的速度,减小画面的抖动。
1.一种跟踪对焦方法,包括:
跟踪目标依次获取图像帧,所述图像帧中包含目标跟踪区域;
计算所述目标跟踪区域的大小参数的变化值和对焦评价值的变化值;
根据所述大小参数变化值和对焦评价值变化值计算马达转动步长;
根据所述马达转动步长生成马达控制指令进行对焦;
其中,所述根据所述大小参数的变化值和对焦评价值的变化值计算马达转动步长的步骤为:
根据公式:
计算所述马达转动步长;其中M为马达转动步长, 为对焦评价值的变化值, 为目标跟踪区域的大小参数的变化值,k为预设的系数,且所述马达转动步长M的方向分别对应近焦端和远焦端。
2.根据权利要求1所述的跟踪对焦方法,其特征在于,所述计算所述目标跟踪区域的大小参数的变化值和对焦评价值的变化值的步骤为:
根据目标跟踪算法计算目标跟踪区域的大小参数及其变化值;
根据对焦评价函数计算图像帧的对焦评价值及其变化值。
3.根据权利要求1所述的跟踪对焦方法,其特征在于,所述根据所述马达转动步长生成马达控制指令进行对焦的步骤之后还包括:
跟踪判断所述对焦评价值是否达到过极值,若是,则生成继续移动-M/2步长的马达控制指令进行对焦微调。
4.根据权利要求1所述的跟踪对焦方法,其特征在于,所述根据所述马达转动步长生成马达控制指令进行对焦的步骤之后还包括:
判断是否对焦成功,若是,则获取马达合焦点位置Sfocus和马达位置处于合焦点位置Sfocus时的目标跟踪区域的大小参数dxfocus;
所述方法还包括:
跟踪计算目标跟踪区域的大小参数dxtracking,根据公式:
计算马达的跟焦位置Stracking,根据跟焦位置Stracking生成马达控制指令,控制马达移动到跟焦位置Stracking。
5.一种跟踪对焦装置,其特征在于,包括:
目标跟踪模块,用于跟踪目标依次获取图像帧,所述图像帧中包含目标跟踪区域;
参数计算模块,用于计算所述目标跟踪区域的大小参数的变化值和对焦评价值的变化值;
转动步长计算模块,用于根据所述大小参数变化值和对焦评价值变化值计算马达转动步长;
马达控制模块,用于根据所述马达转动步长生成马达控制指令进行对焦;
其中,所述转动步长计算模块还用于根据公式:
计算所述马达转动步长;其中M为马达转动步长, 为对焦评价值的变化值, 为目标跟踪区域的大小参数的变化值,k为预设的系数,且所述马达转动步长M的方向分别对应近焦端和远焦端。
6.根据权利要求5所述的跟踪对焦装置,其特征在于,所述参数计算模块还用于根据目标跟踪算法计算目标跟踪区域的大小参数及其变化值;根据对焦评价函数计算图像帧的对焦评价值及其变化值。
7.根据权利要求5所述的跟踪对焦装置,其特征在于,所述装置还包括微调模块用于跟踪判断所述对焦评价值是否达到过极值,若是,则生成继续移动-M/2步长的马达控制指令进行对焦微调。
8.根据权利要求5所述的跟踪对焦装置,其特征在于,所述装置还包括跟焦模块,用于判断是否对焦成功,若是,则获取马达合焦点位置Sfocus和马达位置处于合焦点位置Sfocus时的目标跟踪区域的大小参数dxfocus;
跟踪计算目标跟踪区域的大小参数dxtracking,根据公式:
计算马达的跟焦位置Stracking,根据跟焦位置Stracking生成马达控制指令,控制马达移动到跟焦位置Stracking。
跟踪对焦方法及装置\n技术领域\n[0001] 本发明涉及相机技术领域,尤其涉及一种跟踪对焦方法及装置。\n背景技术\n[0002] 目标跟踪是现有的数码相机、摄像机、手机相机和监控设备等光学成像设备上通常具备的一个功能。用户在进行拍照或摄像时,可在相机的显示屏或监控设备的监视器上看到其摄像头成像形成的所见即所得的图像帧,用户可在图像帧上划定矩形跟踪区域(即跟踪框,通常在图像帧中以实线边框作为标识,通过框住前景图像提示用户),相机或监控设备即可对该矩形跟踪区域中的前景图像进行跟踪,矩形跟踪区域即可在成像得到图像帧中跟随着前景图像的左右上下移动而移动,或者跟随着前景图像距离镜头的远近而放大和缩小。\n[0003] 在进行目标跟踪时,还需要根据目标物体距离镜头的远近进行自动对焦,否则目标物体将变得模糊。然而,传统技术中在进行目标跟踪时的对焦采用的是爬坡算法等方式,对焦速度较慢,影响拍摄体验。\n发明内容\n[0004] 基于此,为了解决上述对焦速度慢的技术问题,特提供了一种跟踪对焦方法。\n[0005] 一种跟踪对焦方法,包括:\n[0006] 跟踪目标依次获取图像帧,所述图像帧中包含目标跟踪区域;\n[0007] 计算所述目标跟踪区域的大小参数的变化值和对焦评价值的变化值;\n[0008] 根据所述大小参数变化值和对焦评价值变化值计算马达转动步长;\n[0009] 根据所述马达转动步长生成马达控制指令进行对焦。\n[0010] 在其中一个实施例中,所述计算所述目标跟踪区域的大小参数的变化值和对焦评价值的变化值的步骤为:\n[0011] 根据目标跟踪算法计算目标跟踪区域的大小参数及其变化值;\n[0012] 根据对焦评价函数计算图像帧的对焦评价值及其变化值。\n[0013] 在其中一个实施例中,所述根据所述大小参数变化值和对焦评价值变化值计算马达转动步长的步骤为:\n[0014] 根据公式:\n[0015]\n[0016] 计算所述马达转动步长;其中M为马达转动步长,▽fv为对焦评价值的变化值,▽dx为目标跟踪区域的大小参数的变化值,k为预设的系数,且所述马达转动步长M的方向分别对应近焦端和远焦端。\n[0017] 在其中一个实施例中,所述根据所述马达转动步长生成马达控制指令进行对焦的步骤之后还包括:\n[0018] 跟踪判断所述对焦评价值是否达到过极值,若是,则生成继续移动-M/2步长的马达控制指令进行对焦微调。\n[0019] 在其中一个实施例中,所述根据所述马达转动步长生成马达控制指令进行对焦的步骤之后还包括:\n[0020] 判断是否对焦成功,若是,则获取马达合焦点位置Sfocus和马达位置处于合焦点位置Sfocus时的目标跟踪区域的大小参数fvfocus;\n[0021] 所述方法还包括:\n[0022] 跟踪计算目标跟踪区域的大小参数fvtracking,根据公式:\n[0023]\n[0024] 计算马达的跟焦位置Stracking,根据跟焦位置Stracking生成马达控制指令,控制马达移动到跟焦位置Stracking。\n[0025] 相应地,为了解决上述对焦速度慢的技术问题,特提供了一种跟踪对焦装置。\n[0026] 一种跟踪对焦装置,包括:\n[0027] 目标跟踪模块,用于跟踪目标依次获取图像帧,所述图像帧中包含目标跟踪区域;\n[0028] 参数计算模块,用于计算所述目标跟踪区域的大小参数的变化值和对焦评价值的变化值;\n[0029] 转动步长计算模块,用于根据所述大小参数变化值和对焦评价值变化值计算马达转动步长;\n[0030] 马达控制模块,用于根据所述马达转动步长生成马达控制指令进行对焦。\n[0031] 在其中一个实施例中,所述参数计算模块还用于根据目标跟踪算法计算目标跟踪区域的大小参数及其变化值;根据对焦评价函数计算图像帧的对焦评价值及其变化值。\n[0032] 在其中一个实施例中,所述转动步长计算模块还用于根据公式:\n[0033]\n[0034] 计算所述马达转动步长;其中M为马达转动步长,▽fv为对焦评价值的变化值,▽dx为目标跟踪区域的大小参数的变化值,k为预设的系数,且所述马达转动步长M的方向分别对应近焦端和远焦端。\n[0035] 在其中一个实施例中,所述装置还包括微调模块用于跟踪判断所述对焦评价值是否达到过极值,若是,则生成继续移动-M/2步长的马达控制指令进行对焦微调。\n[0036] 在其中一个实施例中,所述装置还包括跟焦模块,用于判断是否对焦成功,若是,则获取马达合焦点位置Sfocus和马达位置处于合焦点位置Sfocus时的目标跟踪区域的大小参数fvfocus;\n[0037] 跟踪计算目标跟踪区域的大小参数fvtracking,根据公式:\n[0038]\n[0039] 计算马达的跟焦位置Stracking,根据跟焦位置Stracking生成马达控制指令,控制马达移动到跟焦位置Stracking。\n[0040] 实施本发明实施例,将具有如下有益效果:\n[0041] 上述跟踪对焦方法及装置在目标跟踪和对焦评价的基础上通过简单计算目标跟踪区域的大小参数及其变化值即完成了对焦,计算量小,反应灵敏,从而加快了对焦速度。\n附图说明\n[0042] 为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。\n[0043] 图1为一个实施例中一种跟踪对焦方法的流程图;\n[0044] 图2为一个应用场景中拍摄界面图;\n[0045] 图3为一个应用场景中拍摄界面图;\n[0046] 图4为一个应用场景中拍摄界面图;\n[0047] 图5为一个实施例中镜头光路示意图;\n[0048] 图6为一个实施例中一种跟踪对焦装置的结构示意图。\n具体实施方式\n[0049] 下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。\n[0050] 为解决上述操作的便利性不足的问题,特提出了一种跟踪对焦方法,该方法的执行依赖于计算机程序,可运行于冯诺依曼体系的计算机系统之上。该计算机程序可集成在应用中,也可作为独立的工具类应用运行。该计算机系统可以是数码相机、带有相机功能的智能手机、平板电脑等移动设备,带有可变焦摄像头的监视器或监控设备等。\n[0051] 具体的,在本实施例中,该方法如图1所示,包括:\n[0052] 步骤S102,跟踪目标依次获取图像帧,图像帧中包含目标跟踪区域。\n[0053] 跟踪目标依次获取的图像帧即为在作为拍摄物的目标及其周边场景在相机或摄像头中成像得到的图像,其以帧的形式进行缓存。目标跟踪区域即为用户在相机的显示屏或监视屏上对图像帧划定的作为被拍摄物的目标区域。\n[0054] 例如,如图2所示,用户用手机进入相机功能,则手机摄像头开启,其光学对应的道路场景即通过手机摄像头的成像生成图像帧,并展示在手机的显示屏上,形成所见即所得的拍照体验。若用户希望对该道路场景中的某个行人进行对焦(即将该行人作为拍摄的焦点),则可在显示屏上该行人的区域划定跟踪框(如图2中的矩形框),将该行人作为目标在图像帧中框定,该划定的跟踪框即为初始的目标跟踪区域。\n[0055] 在上例中,在划定显示屏上的图像帧中的行人目标作为跟踪目标之后,由于行人处于运动状态,因此其与相机之间的距离处于变化状态,即时远时近。使用目标跟踪算法可跟踪目标的移动,当行人目标向镜头移动时,根据光学成像原理,如图3所示,则目标跟踪区域会伴随着行人目标向镜头的移动距离放大;当行人目标远离镜头时,根据光学成像原理,如图4所示,则目标跟踪区域会伴随着行人目标远离镜头的移动距离而缩小。因此初始的目标跟踪区域会在划定之后,伴随着跟踪目标在镜头轴线方向上的移动而产生大小的变化。\n[0056] 在本实施例中,可在利用目标跟踪算法进行目标跟踪时,周期性(例如30ms)地生成图像帧,显示在显示屏上即反映了跟踪目标的移动过程。优选的,目标跟踪算法可采用MeanShift跟踪算法、基于粒子群优化的跟踪算法、基于模板匹配的跟踪算法或TLD目标跟踪算法等。\n[0057] 步骤S104,计算目标跟踪区域的大小参数的变化值和对焦评价值的变化值。\n[0058] 目标跟踪区域的大小参数为表征目标跟踪区域大小的一维线性参数。如上例中,如果目标跟踪区域为跟踪框,则其大小参数可选用其长度或宽度的一维线性参数,若目标跟踪区域为圆形,则其大小参数可选用其半径或直径等一维线性参数,若目标跟踪区域为不规则图形,由于目标跟踪区域在图像帧中总是成等比放大或缩小,则可选用对角线,特定角度的连线长度等一维线性参数作为其大小参数。\n[0059] 如前所述,由于在进行目标跟踪时,会周期性地生成多幅反映目标位置的图像帧,因此可根据目标跟踪算法计算目标跟踪区域的大小参数及其变化值,即在生成图像帧时,获取到每幅图像帧中的目标跟踪区域的大小参数,再通过\n[0060] ▽dx=dxcurrent-dxpre\n[0061] 得到每幅图像帧中目标跟踪区域的大小参数相对于上一帧图像中的目标跟踪区域的大小参数的变化值▽dx(dxcurrent和dxpre分别为当前帧图像和前一帧图像的大小参数)。\n[0062] 例如图3和图4反映了随着行人目标的移动连续生成两帧图像,则可统一以图像中的跟踪框的高度作为大小参数,将其相减,即可得到生成图4所示的图像帧时的目标跟踪区域的大小参数的变化值。\n[0063] 对焦评价值即为对焦过程中图像清晰度的一个评判值,对焦评价值在目标处于相机镜头的焦点位置时处于极值,此时相机镜头的成像最为清晰,而伴随着目标与相机镜头的焦点位置的距离的变化,对焦评价值也相应进行变化,从而反映了对焦过程中图像帧的清晰程度。\n[0064] 在本实施例中,通过对焦评价函数得到,例如,在生成图像帧时,可根据灰度梯度函数(灰度涨落变化函数、灰度绝对变化函数、拉普拉斯函数梯度函数等)、信息学函数、频域函数等对焦评价函数得到对焦评价值,再通过\n[0065] ▽fv=fvcurrent-fvpre\n[0066] 得到每幅图像帧相对于上一帧图像的对焦评价值的变化值▽fv(fvcurrent和fvpre分别为当前帧图像和前一帧图像的对焦评价值)。\n[0067] 步骤S106,根据大小参数的变化值和对焦评价值的变化值计算马达转动步长。\n[0068] 数码相机对焦时可通过马达调节镜头的镜片组之间的距离,从而调节焦距。因此,相机镜头的焦距变化与马达的转动步长成比例关系。通过大小参数的变化值和对焦评价值的变化值确定马达的转动步长,即意味着对镜头的焦距进行了调节。\n[0069] 在本实施例中,可根据大小参数的变化值和对焦评价值的变化值的比例关系计算马达转动步长。例如,可根据公式:\n[0070]\n[0071] 计算马达转动步长;其中M为马达转动步长,▽fv为对焦评价值的变化值,▽dx为目标跟踪区域的大小参数的变化值,k为预设的系数,且马达转动步长M的方向分别对应近焦端和远焦端。也就是说,M为正或者负时,分别对应了近焦端和远焦端不同的移动方向,具体的对应关系则可根据k进行调整。\n[0072] 步骤S108,根据马达转动步长生成马达控制指令进行对焦。\n[0073] 计算得到马达转动步长后,即可调用相机镜头的马达的驱动程序,以该计算得到的马达转动步长为参数生成马达控制指令,相机镜头的马达装置在接收到该指令后,即可转动相应的步长完成对焦。\n[0074] 优选的,在对焦过程中,还可对焦距进行微调。具体的,在根据马达转动步长生成马达控制指令进行对焦的步骤之后还包括:跟踪判断对焦评价值是否达到过极值,若是,则生成继续移动-M/2步长的马达控制指令进行对焦微调。\n[0075] 例如,若将马达转动前述指定步长M后,重新计算得到的对焦评价值小于(在所选用的对焦评价函数使用的极值为最大值时的情况,若为使用极值为最小值则相反)移动之前的计算得到的对焦评价值,则表明在移动过程中对焦评价值经历过极值(由于前述步骤S106计算的马达转动步长总是使焦点向目标移动,对焦评价值总是向着极值变化,若发生对焦评价值不增反减,必然为马达转动步长过大导致焦点移动越过了目标,从而使得对焦评价值也相应的经历了极值)。此时,可通过转动马达-M/2步长(反向移动)进行微调。\n[0076] 需要说明的是,该微调的过程可重复执行,直至对焦评价值与极值的差值小于阈值。例如,若对焦前马达位置为S1,对焦后为S2,则微调会移动-M/2步长即移动了-(S2-S1)/2的步长,到达S3位置,若此过程中,仍然跟踪判断得到对焦评价值经历了极值,则可再次移动-M/2步长(此时M即为前次移动的-(S2-S1)/2的步长),即移动到-(S3-S2)/2的步长,以此类推,直至对焦评价值与极值的差值小于阈值,从而完成对焦。\n[0077] 在本实施例中,对焦完成后,将焦点移至跟踪目标位置之后,还可对跟踪目标进行跟焦。具体为:\n[0078] 判断是否对焦成功,若是,则获取马达合焦点位置Sfocus和马达位置处于合焦点位置Sfocus时的目标跟踪区域的大小参数dxfocus;\n[0079] 所述方法还包括:\n[0080] 跟踪计算目标跟踪区域的大小参数dxtracking,根据公式:\n[0081]\n[0082] 计算马达的跟焦位置Stracking,根据跟焦位置Stracking生成马达控制指令,控制马达移动到跟焦位置Stracking。\n[0083] 如图5的光路图所示,在对焦成功后,焦距与目标跟踪区域的大小参数则成反比关系,因此根据该关系即可进行跟焦,而不用重复计算移动步长进行重复对焦。\n[0084] 在一个实施例中,如图6所示,一种跟踪对焦装置,包括目标跟踪模块102、参数计算模块104、转动步长计算模块106和马达控制模块108,其中:\n[0085] 目标跟踪模块102,用于跟踪目标依次获取图像帧,所述图像帧中包含目标跟踪区域。;\n[0086] 参数计算模块104,用于计算所述目标跟踪区域的大小参数的变化值和对焦评价值的变化值。\n[0087] 转动步长计算模块106,用于根据所述大小参数变化值和对焦评价值变化值计算马达转动步长。\n[0088] 马达控制模块108,用于根据所述马达转动步长生成马达控制指令进行对焦。\n[0089] 在本实施例中,参数计算模块104还用于根据目标跟踪算法计算目标跟踪区域的大小参数及其变化值;根据对焦评价函数计算图像帧的对焦评价值及其变化值。\n[0090] 在本实施例中,转动步长计算模块106还用于根据公式:\n[0091]\n[0092] 计算所述马达转动步长;其中M为马达转动步长,▽fv为对焦评价值的变化值,▽dx为目标跟踪区域的大小参数的变化值,k为预设的系数,且所述马达转动步长M的方向分别对应近焦端和远焦端。\n[0093] 在本实施例中,如图6所示,跟踪对焦装置还包括微调模块110,用于跟踪判断所述对焦评价值是否达到过极值,若是,则生成继续移动-M/2步长的马达控制指令进行对焦微调。\n[0094] 在本实施例中,如图6所示,跟踪对焦装置装置还包括跟焦模块112,用于判断是否对焦成功,若是,则获取马达合焦点位置Sfocus和马达位置处于合焦点位置Sfocus时的目标跟踪区域的大小参数dxfocus;\n[0095] 跟踪计算目标跟踪区域的大小参数dxtracking,根据公式:\n[0096]\n[0097] 计算马达的跟焦位置Stracking,根据跟焦位置Stracking生成马达控制指令,控制马达移动到跟焦位置Stracking。\n[0098] 综上所述,实施本发明实施例,将具有如下有益效果:\n[0099] 上述跟踪对焦方法及装置在目标跟踪和对焦评价的基础上通过简单计算目标跟踪区域的大小参数及其变化值即完成了对焦,计算量小,反应灵敏,从而加快了对焦速度。\n[0100] 本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。\n[0101] 以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。
法律信息
- 2020-05-05
专利权人的姓名或者名称、地址的变更
专利权人由广东欧珀移动通信有限公司变更为OPPO广东移动通信有限公司
地址由523860 广东省东莞市长安镇乌沙海滨路18号变更为523860 广东省东莞市长安镇乌沙海滨路18号
- 2017-09-19
- 2016-07-06
实质审查的生效
IPC(主分类): H04N 5/232
专利申请号: 201410669930.6
申请日: 2014.11.20
- 2016-06-08
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 |
1
| | 暂无 |
2006-08-28
| | |
2
| |
2007-12-12
|
2007-06-08
| | |
3
| |
2014-05-07
|
2014-01-23
| | |
4
| |
2014-08-27
|
2012-12-13
| | |
5
| |
2014-10-22
|
2014-04-17
| | |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 1 | | 2014-11-20 | 2014-11-20 | | |