显示指示标识的处理方法、装置和系统

1.一种显示指示标识的处理方法，其特征在于，包括：
获取包括人手握持的移动终端和所述人手及呈像区域的当前场景图像；
根据所述当前场景图像，确定所述移动终端指向所述呈像区域的指示方向；
根据所述指示方向与所述呈像区域在所述当前场景图像中的范围，确定所述指示方向与所述呈像区域之间位于所述呈像区域中的关联位置；
根据所述移动终端提供的显示信号，在所述关联位置显示指示标识；
所述根据所述当前场景图像，确定所述移动终端的指向所述呈像区域的指示方向，包括：
根据预设的人手识别特征，在所述当前场景图像中确定人手所在位置；
基于所述人手所在位置，采用边缘检测算子确定所述人手握持的所述移动终端的特征平面，所述特征平面为所述移动终端的一个具有中轴线的几何平面图形，或者所述特征平面为所述移动终端所显示的具有中轴线的几何平面图形；
根据所述移动终端的特征平面，确定所述移动终端的特征平面的中轴线作为所述指示方向。
2.根据权利要求1所述的处理方法，其特征在于，在根据所述移动终端提供的显示信号，在所述关联位置显示指示标识之前，所述处理方法还包括：
接收移动终端发送的所述显示信号。
3.根据权利要求1所述的处理方法，其特征在于，根据所述移动终端的特征平面，确定所述移动终端的特征平面的中轴线作为所述指示方向，包括：
采用直线检测算法，确定所述具有中轴线的几何平面图形的二维区域方程；
根据所述二维区域方程，获取所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程；
根据所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程，确定所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向。
4.根据权利要求3所述的处理方法，其特征在于，根据所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程，确定所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向，包括：
当所述具有中轴线的几何平面图形具有至少两条中轴线；则获取移动终端的内置电子罗盘当前的指示方向；
在所述具有中轴线的几何平面图形的至少两条中轴线中选择与所述电子罗盘当前的指示方向平行的第一中轴线，并根据所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程，确定所述第一中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向。
5.根据权利要求3或4所述的处理方法，其特征在于，根据所述指示方向与所述呈像区域在所述当前场景图像中的范围，确定所述指示方向与所述呈像区域之间位于所述呈像区域中的关联位置，包括：
根据所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程与所述呈像区域在所述标准三维坐标系中的三维区域方程进行运算，获得在所述标准三维坐标系下的交点坐标，确定所述交点坐标作为所述关联位置。
6.根据权利要求3所述的处理方法，其特征在于，在所述根据当前场景图像，确定移动终端的指示方向之前，还包括：
根据预设的采样检测点，获取定标参数信息；
根据所述定标参数信息确定所述标准三维坐标系；
根据所述定标参数信息和所述标准三维坐标系确定所述呈像区域在所述标准三维坐标系中的三维区域方程。
7.一种显示指示标识的处理装置，其特征在于，包括：
获取模块，用于获取包括人手握持的移动终端和所述人手及呈像区域的当前场景图像；
第一确定模块，用于根据所述当前场景图像，确定所述移动终端指向所述呈像区域的指示方向；
第二确定模块，用于根据所述指示方向与所述呈像区域在所述当前场景图像中的范围，确定所述指示方向与所述呈像区域之间位于呈像区域中的关联位置；
控制模块，用于根据所述移动终端提供的显示信号，在所述关联位置显示指示标识；
所述第一确定模块，包括：
人手识别单元，用于根据预设的人手识别特征，在所述当前场景图像中确定人手所在位置；
特征平面确定单元，用于基于所述人手所在位置，采用边缘检测算子确定所述人手握持的所述移动终端的特征平面，所述特征平面为所述移动终端的一个具有中轴线的几何平面图形，或者所述特征平面为所述移动终端所显示的具有中轴线的几何平面图形；
指示方向确定单元，用于根据所述移动终端的特征平面，确定所述移动终端的特征平面的中轴线作为所述指示方向。
8.根据权利要求7所述的处理装置，其特征在于，所述处理装置还包括：
接收模块，用于接收移动终端发送的所述显示信号。
9.根据权利要求7所述的处理装置，其特征在于，所述指示方向确定单元包括：
第一方程确定子单元，用于采用直线检测算法，确定所述具有中轴线的几何平面图形的二维区域方程；
第二方程确定子单元，用于根据所述二维区域方程，获取所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程；
指示方向确定子单元，用于根据所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程，确定所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向。
10.根据权利要求9所述的处理装置，其特征在于，当所述具有中轴线的几何平面图形具有至少两条中轴线；则所述指示方向确定子单元具体用于获取移动终端的内置电子罗盘当前的指示方向；在所述具有中轴线的几何平面图形的至少两条中轴线中选择与所述电子罗盘当前的指示方向平行的第一中轴线，并根据所述特征平面在标准三维坐标系下的三维区域方程，确定所述第一中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向。
11.根据权利要求9或10所述的处理装置，其特征在于，所述第二确定模块具体用于根据所述所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程与所述呈像区域在所述标准三维坐标系中的三维区域方程进行运算，获得在所述标准三维坐标系下的交点坐标，确定所述交点坐标作为所述关联位置。
12.根据权利要求9所述的处理装置，其特征在于，处理装置还包括：
第三确定模块，用于在根据当前场景图像，确定移动终端的指示方向之前，根据预设的采样检测点，获取定标参数信息；根据所述定标参数信息确定所述标准三维坐标系；根据所述定标参数信息和所述标准三维坐标系确定所述呈像区域在所述标准三维坐标系中的三维区域方程。
13.一种显示指示标识的处理系统，其特征在于，包括显示设备、移动终端及控制设备；
所述控制设备包括权利要求7～12中任一项所述的显示指示标识的处理装置；所述显示设备具有用于显示信息的呈像区域；所述移动终端和所述显示设备可分别通过通信接口与控制设备进行数据传输。

显示指示标识的处理方法、装置和系统\n技术领域\n[0001] 本发明实施例涉及电子信息技术领域，尤其涉及一种显示指示标识的处理方法、装置和系统。\n背景技术\n[0002] 在当今的会议场景中，投影仪及投影幕布是最常用的信息展示手段，参会人员在根据投影幕布所展示的信息进行讲解和讨论时，常常通过激光笔在投影幕布上显示激光圆点，对投影内容做以指示。但在一些会议场景中，激光笔往往被忽略携带或者数量有限，造成很多不便，因此，若能让人们日常携带的移动终端，如手机、PDA（Personal Digital Assistant，个人数字助理）等具备类似激光笔的指示功能，将大大方便人们的工作。\n[0003] 为使上述移动终端具备类似激光笔的指示功能，在现有技术中，通常使移动终端内置一个激光二极管，并配置对应的驱动电路，从而使该激光二极管发出激光，在投影幕布上出现指示效果。\n[0004] 但实现上述方案时，需对移动终端现有的硬件结构和软件程序进行更改，而当前不同类型的移动终端的硬件结构和软件程序各有不同，需针对不同类型的移动终端设计不同的更改方案，耗费人力物力，且通用性较差。\n发明内容\n[0005] 本发明实施例提供一种显示指示标识的处理方法、装置和系统，用于通过使用移动终端可对呈像区域做出指示。\n[0006] 第一方面，本发明实施例提供一种显示指示标识的处理方法，包括：\n[0007] 获取包括人手握持的移动终端和所述人手及呈像区域的当前场景图像；\n[0008] 根据所述当前场景图像，确定所述移动终端指向所述呈像区域的指示方向；\n[0009] 根据所述指示方向与所述呈像区域在所述当前场景图像中的范围，确定所述指示方向与所述呈像区域之间位于所述呈像区域中的关联位置；\n[0010] 根据所述移动终端提供的显示信号，在所述关联位置显示指示标识。\n[0011] 结合第一方面，在第一实施方式中，所述根据所述当前场景图像，确定所述移动终端的指向所述呈像区域的指示方向，包括：\n[0012] 根据预设的人手识别特征，在所述当前场景图像中确定人手所在位置；\n[0013] 基于所述人手所在位置，采用边缘检测算子确定所述人手握持的所述移动终端的特征平面，所述特征平面为所述移动终端的一个具有中轴线的几何平面图形，或者所述特征平面为所述移动终端所显示的具有中轴线的几何平面图形；\n[0014] 根据所述移动终端的特征平面，确定所述移动终端的特征平面的中轴线作为所述指示方向。\n[0015] 结合第一方面或第一方面的第一实施方式，在第二实施方式中，在根据所述移动终端提供的显示信号，在所述关联位置显示指示标识之前，所述显示方法还包括：\n[0016] 接收移动终端发送的所述显示信号。\n[0017] 结合第一方面第二实施方式，在第三实施方式中，根据所述移动终端的特征平面，确定所述移动终端的特征平面的中轴线作为所述指示方向，包括：\n[0018] 采用直线检测算法，确定所述具有中轴线的几何平面图形的二维区域方程；\n[0019] 根据所述二维区域方程，获取所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程；\n[0020] 根据所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程，确定所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向。\n[0021] 结合第一方面第三实施方式，在第四实施方式中，根据所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程，确定所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向，包括：\n[0022] 当所述具有中轴线的几何平面图形具有至少两条中轴线；则获取移动终端的内置电子罗盘当前的指示方向；\n[0023] 在所述具有中轴线的几何平面图形的至少两条中轴线中选择与所述电子罗盘当前的指示方向平行的第一中轴线，并根据所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程，确定所述第一中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向。\n[0024] 结合第一方面第三或第四实施方式，在第五实施方式中，根据所述指示方向与所述呈像区域在所述当前场景图像中的范围，确定所述指示方向与所述呈像区域之间位于所述呈像区域中的关联位置，包括：\n[0025] 根据所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程与所述呈像区域在所述标准三维坐标系中的三维区域方程进行运算，获得在所述标准三维坐标系下的交点坐标，确定所述交点坐标作为所述关联位置。\n[0026] 结合第一方面第三实施方式至第五实施方式中的任一种实施方式，在第六实施方式中，在所述根据当前场景图像，确定移动终端的指示方向之前，所述控制方法还包括：\n[0027] 根据预设的采样检测点，获取定标参数信息；\n[0028] 根据所述定标参数信息确定所述标准三维坐标系；\n[0029] 根据所述定标参数信息和所述标准三维坐标系确定所述呈像区域在所述标准三维坐标系中的三维区域方程。\n[0030] 第二方面，本发明实施例提供一种显示指示标识的处理装置，包括：\n[0031] 获取模块，用于获取包括人手握持的移动终端和所述人手及呈像区域的当前场景图像；\n[0032] 第一确定模块，用于根据所述当前场景图像，确定所述移动终端指向所述呈像区域的指示方向；\n[0033] 第二确定模块，用于根据所述指示方向与所述呈像区域在所述当前场景图像中的范围，确定所述指示方向与所述呈像区域之间位于呈像区域中的关联位置；\n[0034] 控制模块，用于根据所述移动终端提供的显示信号，在所述关联位置显示指示标识。\n[0035] 结合第二方面，在第一实施方式中，所述第一确定模块，包括：\n[0036] 人手识别单元，用于根据预设的人手识别特征，在所述当前场景图像中确定人手所在位置；\n[0037] 特征平面确定单元，用于基于所述人手所在位置，采用边缘检测算子确定所述人手握持的所述移动终端的特征平面，所述特征平面为所述移动终端的一个具有中轴线的几何平面图形，或者所述特征平面为所述移动终端所显示的具有中轴线的几何平面图形；\n[0038] 指示方向确定单元，用于根据所述移动终端的特征平面，确定所述移动终端的特征平面的中轴线作为所述指示方向。\n[0039] 结合第二方面或第二方面第一实施方式，在第二实施方式中，所述处理装置还包括：\n[0040] 接收模块，用于接收移动终端发送的所述显示信号。\n[0041] 结合第二方面第二实施方式，在第三实施方式中，所述指示方向确定单元包括：\n[0042] 第一方程确定子单元，用于采用直线检测算法，确定所述具有中轴线的几何平面图形的二维区域方程；\n[0043] 第二方程确定子单元，用于根据所述二维区域方程，获取所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程；\n[0044] 指示方向确定子单元，用于根据所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程，确定所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向。\n[0045] 结合第二方面第三实施方式，在第四实施方式中，当所述具有中轴线的几何平面图形具有至少两条中轴线；则所述指示方向确定子单元具体用于获取移动终端的内置电子罗盘当前的指示方向；在所述具有中轴线的几何平面图形的至少两条中轴线中选择与所述电子罗盘当前的指示方向平行的第一中轴线，并根据所述特征平面在标准三维坐标系下的三维区域方程，确定所述第一中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向。\n[0046] 结合第二方面第三或第四实施方式，在第五实施方式中，所述第二确定模块具体用于根据所述所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程与所述呈像区域在所述标准三维坐标系中的三维区域方程进行运算，获得在所述标准三维坐标系下的交点坐标，确定所述交点坐标作为所述关联位置。\n[0047] 结合第二方面第三至第四实施方式中的任一种实施方式，在第六实施方式中，所述处理装置还包括：\n[0048] 第三确定模块，用于在根据当前场景图像，确定移动终端的指示方向之前，根据预设的采样检测点，获取定标参数信息；根据所述定标参数信息确定所述标准三维坐标系；根据所述定标参数信息和所述标准三维坐标系确定所述呈像区域在所述标准三维坐标系中的三维区域方程。\n[0049] 第三方面，本发明实施例提供一种显示指示标识的处理系统，包括显示设备、移动终端及控制设备；所述控制设备包括上述第二方面至第二方面第六实施方式中任一种所述的显示指示标识的处理装置；所述显示设备具有用于显示信息的呈像区域；所述移动终端和所述显示设备可分别通过通信接口与控制设备进行数据传输。\n[0050] 本发明实施例提供的指示标识控制方法、装置和系统，通过采集的当前场景图像，确定移动终端的指示方向及该指示方向与信息的呈像区域之间的关联位置，实现通过移动终端在呈像区域上显示的指示标识，便于用户随时使用任意移动终端在信息的呈像区域上做出指示，即该方法通用性较好，且操作便捷，给用户的工作学习带来便利。\n附图说明\n[0051] 为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。\n[0052] 图1为本发明显示指示标识的处理方法实施例一的流程图；\n[0053] 图2为本发明显示指示标识的处理方法实施例二的流程图；\n[0054] 图3为本发明实施例二中的应用场景示意图；\n[0055] 图4为本发明实施例二中一种移动终端的示意图；\n[0056] 图5为本发明实施例二中另一种移动终端的示意图；\n[0057] 图6为本发明显示指示标识的处理方法实施例三的流程图；\n[0058] 图7为本发明实施例三中应用场景示意图；\n[0059] 图8为本发明显示指示标识的处理装置实施例一的结构图；\n[0060] 图9为本发明显示指示标识的处理装置实施例二的结构图；\n[0061] 图10为本发明显示指示标识的处理系统实施例一的示意图。\n具体实施方式\n[0062] 为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。\n[0063] 图1为本发明显示指示标识的处理方法实施例一的流程图。本实施例的方法可应用于类似投影显示的情况中。在投影显示时一般设置有投影仪和投影幕布，该投影幕布上显示信息的区域作为呈像区域，而投影仪一般与具备控制功能的控制设备相连，例如所述控制设备常见的是计算机。还需设置一现场图像捕捉设备和移动终端。现场图像捕捉设备例如为摄像机，可以是独立的摄像机，将其采集的图像提供给控制设备，或者也可以是该控制设备集成了图像采集功能。移动终端典型为手机，用户使用该手机做出指示动作，随后控制设备可根据用户使用该手机做出指示动作，在呈像区域中进行指示标识的显示。\n[0064] 本实施例的方法具体可以由显示指示标识的处理装置来实现，该处理装置可以采用硬件和/或软件方式来实现，优选设置在上述控制设备内来实现指示标识的显示。如图1所示，该方法包括：\n[0065] S101、获取包括人手握持的移动终端和该人手及呈像区域的当前场景图像。\n[0066] 以上述投影显示的情况为例，用户的人手握持移动终端并做出指示动作（例如，用户作为讲解人员需要向参会人员讲解投影幕布上当前显示的机器的一个部件，则会用手握持移动终端指向该部件，即做出指示动作，以期望可在该部件处显示指示标识），此时现场图像捕捉设备受显示指示标识的处理装置的控制，获取到的当前场景图像中包括人手握持的移动终端和该人手，及作为呈像区域的投影幕布。\n[0067] S102、根据当前场景图像，确定移动终端指向呈像区域的指示方向；\n[0068] 现场图像捕捉设备将当前场景图像提供给显示指示标识的处理装置，该处理装置根据该采集的当前场景图像进行图像处理分析，确定移动终端指向呈像区域的指示方向；\n在确定上述指示方向时，处理装置可通过图像分析获知移动终端当前所在的位置，并进行特征分析，具体如采用预设的坐标系确定移动终端当前所在的位置，并在该坐标系下进运算处理，确定出表征移动终端的指示方向。举例来说，移动终端为手机，用于显示信息的呈像区域为投影幕布，该投影幕布当前显示了一副机械图片，而讲解人员与该投影幕布之间存在一定距离，讲解人员在对该图进行讲解的过程中，需要配合讲解内容对图中各个零件做出指示，讲解人员经过目测可使用手握持手机并指向当前需讲解的零件所在的方向，则显示指示标识的处理装置根据采集的当前场景图像进行图像处理分析可确定手机当前的指示方向，即确定用户当前通过手机所指示的方向。\n[0069] S103、根据指示方向与呈像区域在当前场景图像中的范围，确定指示方向与呈像区域之间位于呈像区域中的关联位置；\n[0070] 上述用于显示信息的呈像区域可以为各种可用于显示信息的区域，例如在配置有投影仪及投影幕布的会议室中，上述呈像区域为投影幕布，投影幕布所显示的内容是对计算机显示屏进行面向投影幕布的投影获得的；若在配置有电子屏幕的播放室中，上述呈像区域为该电子屏幕，如LED（Light Emitting Diode，发光二极管）显示屏。可通过预先设定、人工调节或自动识别来使得处理装置能获知呈像区域所在范围，该范围可通过坐标限定。\n[0071] 上述呈像区域与移动终端在空间位置上具有关联关系，如移动终端与呈像区域之间的距离、角度等关联关系，则根据该关联关系可确定移动终端与呈像区域之间的关联位置；例如，移动终端通常为规则的几何形状，则上述处理装置可以将移动终端的一个侧面（如手机显示屏所在的手机侧面）的中轴线所在的方位作为上述指示方向，该中轴线必然和呈像区域所在的平面存在交点，则该交点即为关联位置。\n[0072] S104、根据移动终端提供的显示信号，在关联位置显示指示标识。\n[0073] 指示标识是处理装置根据移动终端提供的显示信号而形成的，例如，人手握持移动终端指向呈像区域，以期望在呈像区域上的某个位置显示指示标识，则处理装置结合移动终端与呈像区域的相对位置，在呈像区域上显示指示标识。例如，信息的呈像区域为投影幕布，讲解人员当前希望在投影幕布的中心点处出现指示标识，如一个红色圆点，则讲解人员通过人手握持的移动终端向投影幕布的中心点的位置做出指示动作，则处理装置通过S101～S103确定出准确的关联位置后（由于人眼观察误差，该关联位置可能在投影幕布上与投影幕布的中心点吻合，或者和投影幕布的中心点之间存在一定的距离差），便在该关联位置处显示一个红色圆点，即实现指示标识，若该指示标识与讲解人员期望的中心点之间有距离差，则讲解人员通过人手握持移动终端进行移动调整，从而处理装置再次执行S101～S104，在中心点显示指示标识。\n[0074] 在本实施例中提供的显示指示标识的处理方法，通过采集的当前场景图像并进行图像分析，确定移动终端的指示方向及该指示方向与信息的呈像区域之间的关联位置，实现通过移动终端在呈像区域上显示指示标识，便于用户随时使用任意移动终端在信息的呈像区域上做出指示，即该方法通用性较好，且操作便捷，给用户的工作学习带来便利。\n[0075] 图2为本发明显示指示标识的处理方法实施例二的流程图。如图2所示，本实施例以上述实施例为基础，进一步优化了进行图像处理的过程，该方法包括：\n[0076] S201、确定标准三维坐标系。\n[0077] 图3为本发明实施例二中的应用场景示意图。如图3所示，用于显示信息的呈像区域为一个电子显示屏20，现场图像捕捉设备50为立体视觉装置，该立体视觉装置采用双摄像机捕捉现场图像。而显示指示标识的处理装置可控制电子显示屏的显示，也可接收立体视觉装置获取的图像并进行图像处理。由于处理装置是根据现场图像捕捉设备采集的场景图像对移动终端30进行方位分析，因此需确定在现场图像捕捉设备的视角下的标准三维坐标系Oc-XcYcZc及处理图像的相关参数，具体的确定方法如下：\n[0078] S1a、根据预设的采样检测点，获取定标参数信息；\n[0079] 在实际应用时可使用张正友定标方法获取定标参数信息；具体来说，在场景中预设一个采样检测点，如在场景中放置一个已知固定尺寸的黑白棋盘，并使现场图像捕捉设备捕捉包括该采样检测点的场景图像；通过对现场图像捕捉设备所捕捉的图像进行图像分析处理获取定标参数信息，定标参数信息包括内参数、结构参数；其中内参数包括现场图像捕捉设备采用的焦距、成像的畸变参数等，结构参数包括两个摄像机之间的三维平移矩阵和三维旋转矩阵，该平移矩阵为 旋转矩阵为 其中平移矩阵中的\n元素tx、ty、tz及旋转矩阵中元素r1至r9的值是将上述捕捉的图像经过图像分析处理后获得的。\n[0080] S1b、根据所述定标参数信息确定所述标准三维坐标系；\n[0081] 具体可使用上述结构参数确定标准三维坐标系。\n[0082] S1c、根据定标参数信息和所述标准三维坐标系确定呈像区域在标准三维坐标系中的三维区域方程。\n[0083] 上述呈像区域，如电子显示屏在应用场景中也是位置固定不变的，因此，在确定标准三维坐标系后，便可确定该呈像区域在标准三维坐标系中的三维区域方程。具体的，现场图像捕捉设备拍摄电子显示屏，则处理装置根据上述内参数对拍摄到的图像进行畸变校正，随后对校正后的图像进行图像处理，获取电子显示屏在标准三维坐标系下的三维区域方程。\n[0084] 需要说明的是，上述S201是在应用场景中第一次实施本发明的显示指示标识的处理方法时才会执行，当标准三维坐标系即相关参数确定后，再次实施显示指示标识的处理方法时，直接由S202开始执行。\n[0085] S202、获取包括人手握持的移动终端和人手，及呈像区域的当前场景图像。\n[0086] S203、根据当前场景图像，确定人手握持的移动终端的特征平面。\n[0087] 具体的，显示指示标识的处理装置在采集的当前场景图像中，根据预设的人手识别特征，如人的肤色特征及手部的轮廓识别人手在图像中所在的位置；或者，现场图像捕捉设备集成红外热成像仪的功能，感知了人体温度在图像中人手部位成像，由此确定人手在图像中所在的位置，进而识别人手握持的移动终端。\n[0088] 基于人手所在位置，可采用边缘检测算子确定人手握持的移动终端的特征平面，具体来说，图4为本发明实施例二中一种移动终端的示意图。如图4所示，移动终端为常见的手机，而该手机所占用的空间区域与人手所占用的空间区域有重叠，则可以将人手作为检测基准点，在一定的检测范围内检测手机；例如确定人手所在位置后，在人手的手指区域附近发现图像的阶跃变化，即采用边缘检测算子（如Canny边缘算子、梯度算子、马尔算子等）检测出手机的轮廓；根据该手机的轮廓，进一步的确定手机的指示方向。\n[0089] 通常手机为矩形立方体结构，且厚度相对于手机的前侧面或后侧面的长度、宽度来说，尺寸较小，则在图像处理时可将手机看做一个矩形平板，则上述检测出手机的轮廓即为一个近似矩形的图形，也就是说，对手机而言，上述移动终端的特征平面为移动终端的一个具有中轴线的几何平面图形，即手机的一个矩形侧面。\n[0090] 更灵活的，图5为本发明实施例二中另一种移动终端的示意图。如图5所示，上述特征平面为移动终端所显示的具有中轴线的几何平面图形；举例来说，讲解人员希望使用手机对会议室内的电子显示屏上的信息做出指示，则可开启手机内一个应用程序，该应用程序可在手机的显示屏上显示一个具有中轴线的几何平面图形，例如一个矩形，则采用边缘检测算子可检测出手机显示屏上显示的矩形图像的轮廓。\n[0091] 综上，可以灵活地选择移动终端上具有中轴线的几何图形看做移动终端的特征平面。\n[0092] S204、根据移动终端的特征平面，确定移动终端的特征平面的中轴线作为指示方向。\n[0093] 以特征平面为如图4所示的移动终端的一个具有中轴线的几何平面图形为例，采用直线检测算法，检测出上述手机的轮廓的直线方程L1、L2和L3；上述直线检测算法可以为随机霍夫（Hough）变换及其他基于hough变换进行改进得到的直线检测算法；具体以hough变换为例，其原理为利用图像空间和Hough参数空间的点－线对偶性，把图像空间中的检测问题转换到参数空间，以对图像中的直线进行检测。在此需要说明的是，S202中采集的当前场景图像为一个平面图像，因此此时的L1、L2和L3是在这个平面图像中的二维直线方程，L1、L2和L3共同表示了该特征平面的二维区域方程；随后在每一条二维直线上选择多个特征点进行立体特征匹配，获取每个特征点在上述标准三维坐标系下的三维坐标，最后根据每一条二维直线上所选择的多个特征点的三维坐标进行最小二乘法拟合运算，获取特征平面在标准三维坐标系下的三维区域方程，即根据二维区域方程，获取特征平面在标准三维坐标系下的三维区域方程。\n[0094] 具体来说，本实施例中现场图像捕捉设备采用双摄像机，则场景中同一个点在两个摄像机各自拍摄的两张图像中存在差异；因此在上述每个二维直线上选取5个特征点（也可根据精度需求设置特征点的数量，具体数量本实施例不作限制），该5个特征点的每一个特征点在两个摄像机各自拍摄的两张图像中也是存在差异，采用基于灰度的区域匹配方法分别将两张图像中的5个特征点一一对应，结合上述结构参数中的三维旋转矩阵和三维平移矩阵确定出每条直线上的特征点在标准三维坐标系下的三维坐标，确定该三维坐标（x，y，z）的具体计算公式如下：\n[0095] x=zXl/fl；\n[0096] y=zYl/fl；\n[0097] 或者，\n[0098]\n[0099] 其中，fl为双目摄像机中左摄像机的有效焦距，fr为双目摄像机中右摄像机的有效焦距；(Xr,Yr)为特征点在右摄像机中的二维坐标；(Xl,Yl)为特征点在左摄像机中的二维坐标；举例来说，在上述二维直线方程L1所表示的二维直线上选择5个特征点A、B、C、D、E为例，特征点A、B、C、D、E在一个摄像机所拍摄的图像中位置分别为A1、B1、C1、D1、E1；而在另一个摄像机所拍摄的图像中位置分别为A2、B2、C2、D2、E2；采用基于灰度的区域匹配方法将A1和A2，B1和B2，C1和C2，D1和D2，E1和E2一一对应，并利用上述确定三维坐标（x，y，z）的计算公式分别确定出A、B、C、D、E在三维坐标系下的三维坐标。在确定出每一条二维直线上的各特征点在标准三维坐标系下的三维坐标后，根据同一条二维直线上的多个特征点在三维坐标系下的三维坐标，进行最小二乘法拟合运算，得到该条直线在标准三维坐标系下的三维直线方程；即获得上述L1、L2和L3在标准三维坐标系下的三维直线方程L1′、L2′和L3′，从而三维直线方程L1′、L2′和L3′可共同表示上述具有中轴线的几何图形在标准三维坐标系下的三维区域方程。\n[0100] 根据上述具有中轴线的几何图形在标准三维坐标系下的三维区域方程，即三维直线方程L1′、L2′和L3′，确定了该具有中轴线的几何图形的中轴线在标准三维坐标系下的三维直线方程Lm作为上述移动终端的指示方向。\n[0101] 需要说明的是，在几何学上，对于等腰三角形等图形仅有一条中轴线，而对于矩形来说，却有两条中轴线，因此，当上述具有中轴线的几何图形具有至少两条中轴线时，上述处理装置还需获取移动终端的内置电子罗盘当前的指示方向，从而根据电子罗盘当前的指示方向，在移动终端特征平面的至少两条中轴线中选择与电子罗盘当前的指示方向平行的第一中轴线，并根据所述特征平面在标准三维坐标系下的三维区域方程，确定该第一中轴线在标准三维坐标系下的三维直线方程作为指示方向。\n[0102] 基于图5所示的特征平面确定该特征平面的中轴线在标准三维坐标系下的三维直线方程Ln作为指示方向的方法和上述过程一致，在此不再赘述。\n[0103] S205、根据指示方向与信息的呈像区域所在的范围，确定指示方向与呈像区域之间位于呈像区域中的关联位置。\n[0104] 由于在S201中已知呈像区域在标准三维坐标系中的三维区域方程；则根据特征平面的中轴线在标准三维坐标系下的三维直线方程（Lm或Ln）与呈像区域在标准三维坐标系中的三维区域方程进行运算，获得在所述标准三维坐标系下的交点坐标，确定该交点坐标作为关联位置，即联立特征平面的中轴线在标准三维坐标系下的三维直线方程和呈像区域在标准三维坐标系中的三维区域方程进行求解运算，得到的解的值为交点的三维坐标。\n[0105] S206、判断是否接收到移动终端发送的显示信号；若是，则执行S207，若否，则停止。\n[0106] 当场景中移动终端较多（如参会人员人手握持一部手机），上述装置可对应每一个移动终端确定移动终端的指示方向与呈像区域之间的关联位置，但若对应每一个移动终端都显示该移动终端的指示标识，则在呈像区域上易出现指示混乱，因此处理装置控制指示标识在关联位置处显示之前，需接收移动终端发送的显示信号；当判断得知接收到移动终端发送的显示信号后，则在该移动终端所对应的关联位置处显示指示标识；若未接收到上述显示消息，则不显示指示标识；但可以理解的，处理装置会保持追踪该移动终端的指示方向，并实时地确定移动终端当前的指示方向与呈像区域之间的关联位置，以便在接收到该移动终端发送的显示信号后，可立即在关联位置显示指示标识。\n[0107] 以会议场景为例，参会人员有5人，每人携带一部手机，而这5人中只有一人作为信息讲解人员，则仅需显示基于该讲解人员的手机的指示标识，因此，讲解人员开启手机上装载的适配于本实施例处理方法的应用程序，手机显示屏上出现一个“显示”按钮，点击该按钮，触发手机向处理装置发送了信号波，该信号波可理解为手机向处理装置发送的显示信号，灵活的，该信号波也可通过按下手机上的物理按键触发发送；当处理装置控制指示标识显示，即在讲解人员的手机的指示方向与投影幕布之间的关联位置处显示一个红色圆点（红色圆点仅用于说明本实施例的方法，具体的显示形状或颜色，本实施例不做限制），若讲解人员发现该红色圆点不在所希望的位置处，则持续按住“显示”按钮并移动手机，而处理装置实时获取当前场景中手机的指示方向与呈像区域之间的关联位置，使红色圆点在当前的关联位置处显示。\n[0108] 也可以理解的是，若会议场景中仅有讲解人员持有手机，则处理装置在检测到现场仅有一个手机后（例如处理装置通过一定的通信信号，在会议场景中发出手机可接收的探测波，则处理装置可根据接收的由手机发送的反馈消息确定会议场景中手机的数量；或者，移动终端可通过开启移动终端上装载的应用程序，以控制移动终端上的指示灯进行闪烁，向处理装置表明其该移动终端会做出指向呈像区域的指示动作，可以理解的，其他未开启应用程序以使移动终端上的指示灯进行闪烁的移动终端，则处理装置不会实时地追踪此移动终端的指示方向。），便默认在手机的指示方向与呈像区域之间的关联位置处显示指示标识，不需执行S206中判断是否接收到移动终端发送的指示标识的显示消息，即执行S205之后可直接执行S207。\n[0109] S207、根据移动终端提供的显示信号，在关联位置显示指示标识。\n[0110] 根据S205中确定的交点的三维坐标，控制电子显示屏在对应的位置处显示指示标识。\n[0111] 在本实施例中提供的指示标识控制方法，通过采集的当前场景图像，确定移动终端的指示方向及该指示方向与信息的呈像区域之间的关联位置，实现通过移动终端对在呈像区域上显示指示标识，便于用户随时使用任意移动终端在呈像区域上做出指示，即该方法通用性较好，且操作便捷，给用户的工作学习带来便利。\n[0112] 图6为本发明显示指示标识的处理方法实施例三的流程图。如图6所示，在上述实施例一的基础上，本实施例还可将图像处理的过程进行另一种优化，该方法包括：\n[0113] S301、确定标准三维坐标系。\n[0114] 具体的，图7为本发明实施例三中应用场景示意图。如图7所示，信息的显示具体通过一个投影幕布21和一台计算机实现，其中投影幕布上的内容是对一台计算机的计算机屏幕22进行投影获得的，现场图像捕捉设备50为立体视觉装置，其中，显示指示标识的处理装置负责对立体视觉装置获取的图像进行处理，而投影幕布的显示上内容的显示由计算机控制，但显示指示标识的处理装置可控制该计算机的显示屏进行显示。\n[0115] 与S201类似，需确定在现场图像捕捉设备的视角下的标准三维坐标系及处理图像的相关参数，具体的确定方法如下：\n[0116] S3a、根据预设的采样检测点，获取定标参数信息；\n[0117] 本实施例中获取定标参数信息的方法与实施例二S201中的步骤S1a类似，但在本实施例中，该定标参数信息除了包括内参数、结构参数以外，还包括用于坐标系转换的参数，具体的，根据张正友定标方法，确定基于现场图像捕捉设备视角下的标准三维坐标系Oc-XcYcZc和基于投影幕布视角下的相对三维坐标系Ops-XpsYpsZps之间的转换参数，还有计算机显示屏的二维坐标系Os-XsYs和投影幕布的相对三维坐标系Ops-XpsYpsZps之间的转换参数。\n[0118] S3b、根据所述定标参数信息确定标准三维坐标系；\n[0119] 本实施例中的步骤S3b和实施例二S201中的步骤S1b类似，在此不再赘述。\n[0120] S3c、根据所述定标参数信息和所述标准三维坐标系确定所述呈像区域在所述标准三维坐标系中的三维区域方程。\n[0121] 本实施例中的步骤S3c和实施例二S201中的步骤S1c类似，在此不再赘述。\n[0122] S3d、根据上述转换参数确定坐标系之间的转换关系。\n[0123] 具体的，确定上述标准三维坐标系和相对三维坐标系之间的转换关系\n所示，其中，Xc、Yc和Zc表示在标准坐标系下的X轴、Y轴和Z轴，而Xps、Yps和\nZps表示在上述相对坐标系下的X轴、Y轴和Z轴，R为3×3的旋转矩阵，T为3×1平移矩阵，其中矩阵中元素的赋值根据现场的测量值确定，即由步骤S3a确定；进一步的，确定计算机屏幕的二维坐标系和投影幕布的相对三维坐标系之间的转换关系\n其中，XS和YS为计算机屏幕的二维坐标系中的X轴和Y轴，转换参数\nA1至A8的赋值由步骤S3a中确定。\n[0124] 需要说明的是，上述S301是在应用场景中第一次实施本发明的处理方法时才会执行，当标准三维坐标系的相关参数确定后，再次实施显示指示标识的处理方法时，直接由S302开始执行。\n[0125] S302、获取包括人手握持的移动终端和人手，及呈像区域的当前场景图像\n[0126] S303、根据当前场景图像，确定移动终端的特征平面。\n[0127] S304、根据移动终端的特征平面，确定人手握持的移动终端的特征平面的中轴线作为指示方向。\n[0128] S305、根据指示方向与信息的呈像区域所在范围，确定指示方向与呈像区域之间位于呈像区域中的关联位置。\n[0129] S306、判断是否接收到移动终端发送的显示信号；若是，则执行S307，若否，则停止。\n[0130] 本实施例中S302～S306与实施例二类似，可参考S202～S206,在此不再赘述。\n[0131] S307、根据移动终端提供的显示信号，在关联位置显示指示标识。\n[0132] 在S305中确定的关联位置是在标准三维坐标系下确定的，即上述处理装置在标准三维坐标系下确定了移动终端的特征平面的中轴线与投影幕布之间的交点，但由于投影幕布的显示是将计算机显示屏上的内容进行了投影获得的，所以在投影幕布上的关联位置显示指示标识是需要计算机显示屏在对应该关联位置的地方显示指示标识；因此，显示指示标识的处理装置在关联位置显示指示标识时，还需包括下述各步骤：\n[0133] S4a，将关联位置进行坐标系的转换。\n[0134] 具体的，S305中确定出标准三维坐标系下的关联位置，即移动终端的特征平面的中轴线与投影幕布之间的交点坐标为（Xc1，Yc1，Zc1）；根据 对（Xc1，Yc1，Zc1）进行转换，获得关联位置在相对坐标系下的坐标（Xps1，Yps1，Zps1）；由于计算机显示屏采用二维坐标系，则根据计算机屏幕的二维坐标系和投影幕布的相对三维坐标系之间的转换关系将（Xps1，Yps1）进行转换，获得（Xs1，Ys1）。\n[0135] S4b，向显示设备发送控制显示消息。\n[0136] 上述处理装置在向显示设备中的计算机发送控制显示消息时，携带位置指示消息，即坐标（Xs1，Ys1），举例来说，计算机根据（Xs1，Ys1）确定（Xs1，Ys1）指示的位置为计算机显示屏中心点，则计算机控制计算机显示屏在中心点处显示红色圆点，从而计算机显示屏中心点处的红色圆点经过投影后在投影幕布上的显示位置与S305所确定的关联位置吻合，实现指示标识的显示。\n[0137] 更灵活的，显示指示标识的处理装置可不执行S4a，直接执行S4b；即将移动终端的特征平面的中轴线与投影幕布之间的交点坐标（Xc1，Yc1，Zc1）直接发送给计算机，随后由计算机根据各个坐标系转换公式将（Xc1，Yc1，Zc1）转换为（Xs1，Ys1），并根据（Xs1，Ys1）在计算机显示屏的对应位置处显示指示标识，则该指示标识同样会被投影至投影幕布中由S304所确定的关联位置处。\n[0138] 在本实施例中提供的指示标识控制方法，通过采集的当前场景图像，确定移动终端的指示方向及该指示方向与信息的呈像区域之间的关联位置，实现通过移动终端在呈像区域上显示指示标识，便于用户随时使用任意移动终端在信息的呈像区域上做出指示，即该方法通用性较好，且操作便捷，给用户的工作学习带来便利。\n[0139] 图8为本发明显示指示标识的处理装置实施例一的结构图。如图8所示，该装置包括：\n[0140] 获取模块10，用于获取包括人手握持的移动终端和所述人手及呈像区域的当前场景图像；\n[0141] 第一确定模块11，用于根据所述当前场景图像，确定所述移动终端指向所述呈像区域的指示方向；\n[0142] 第二确定模块12，用于根据所述指示方向与所述呈像区域在所述当前场景图像中的范围，确定所述指示方向与所述呈像区域之间位于呈像区域中的关联位置；\n[0143] 控制模块13，用于根据所述移动终端提供的显示信号，在所述关联位置显示指示标识。\n[0144] 在本实施例中提供的显示指示标识的处理装置，通过采集的当前场景图像，确定移动终端的指示方向及该指示方向与信息的呈像区域之间的关联位置，实现通过移动终端在呈像区域上显示指示标识，便于用户随时使用任意移动终端在信息的呈像区域上做出指示，即该装置通用性较好，且操作便捷，给用户的工作学习带来便利。\n[0145] 图9为本发明显示指示标识的处理装置实施例二的结构图。如图9所示，上述第一确定模块11具体包括：\n[0146] 人手识别单元111，用于根据预设的人手识别特征，在所述当前场景图像中确定人手所在位置；\n[0147] 特征平面确定单元112，用于基于所述人手所在位置，采用边缘检测算子确定所述人手握持的所述移动终端的特征平面，所述特征平面为所述移动终端的一个具有中轴线的几何平面图形，或者所述特征平面为所述移动终端控制显示的具有中轴线的几何平面图形；\n[0148] 指示方向确定单元113还用于根据所述移动终端的特征平面，确定所述移动终端的特征平面的中轴线作为所述指示方向。\n[0149] 进一步的，上述处理装置还包括：\n[0150] 接收模块14，用于接收移动终端发送的显示信号。\n[0151] 上述指示方向确定单元113具体包括：第一方程确定子单元113a，具体用于采用直线检测算法，确定所述具有中轴线的几何平面图形的二维区域方程；\n[0152] 第二方程确定子单元113b还用于根据所述二维区域方程，获取所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程；\n[0153] 指示方向确定子单元113c还用于根据所述具有中轴线的几何平面图形在标准三维坐标系下的三维区域方程，确定所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向。\n[0154] 进一步的，当上述具有中轴线的几何平面图形具有至少两条中轴线；则上述指示方向确定子单元113c还用于获取移动终端的内置电子罗盘当前的指示方向；\n[0155] 在上述具有中轴线的几何平面图形的至少两条中轴线中选择与所述电子罗盘当前的指示方向平行的第一中轴线，并根据所述特征平面在标准三维坐标系下的三维区域方程，确定所述第一中轴线在所述标准三维坐标系下的三维直线方程作为所述指示方向。\n[0156] 进一步的，上述第二确定模块12具体用于根据所述具有中轴线的几何平面图形的中轴线在所述标准三维坐标系下的三维直线方程与所述呈像区域在所述标准三维坐标系中的三维区域方程进行运算，获得在所述标准三维坐标系下的交点坐标，确定所述交点坐标作为所述关联位置。\n[0157] 灵活的，对应于上述方法实施例三，上述处理装置还包括发送模块15，用于向显示设备发送控制显示消息。\n[0158] 进一步的，上述处理装置还包括：\n[0159] 第三确定模块16，在根据当前场景图像，确定移动终端的指示方向之前，根据预设的采样检测点，获取定标参数信息；根据所述定标参数信息确定所述标准三维坐标系；根据所述定标参数信息和所述标准三维坐标系确定所述呈像区域在所述标准三维坐标系中的三维区域方程。\n[0160] 上述各装置实施例中的各模块对应于上述各方法实施例，在此不再赘述。\n[0161] 在本实施例中提供的显示指示标识的处理装置，通过采集的当前场景图像，确定移动终端的指示方向及该指示方向与信息的呈像区域之间的关联位置，实现通过移动终端在呈像区域上显示指示标识，便于用户随时使用任意移动终端在信息的呈像区域上做出指示，即该装置通用性较好，且操作便捷，给用户的工作学习带来便利。\n[0162] 进一步的，图10为本发明显示指示标识的处理系统实施例一的示意图。如图10所示，该系统包括显示设备60、移动终端30及控制设备40，其中显示设备60具有用于显示信息的呈像区域，具体可为上述投影幕布21和计算机22共同构成；也可为上述一个独立的电子显示屏20，该电子显示屏20所显示的内容由控制设备40控制显示；该控制设备40包括上述显示指示标识的处理装置实施例一和实施例二中所述的显示指示标识的处理装置。另外，控制设备40可集成上述现场图像捕捉设备50的功能，也可接收独立的现场图像捕捉设备50所发送的现场场景图像；当控制设备40分析现场场景图像后，确定了移动终端30的指示方向和呈像区域之间的关联位置，则控制设备40控制显示设备20在关联位置处显示指示标识。\n[0163] 灵活的，控制设备40确定关联位置之后，控制显示设备20在关联位置处显示指示标识之前，需判断是否接收到移动终端30发送的指示标识的显示消息，若是，则控制显示设备20在关联位置处显示指示标识；否则，不进行显示；当场景中存在多个移动终端时，通过判断是否接收到某个移动终端30发送的指示标识的显示消息进行指示标识的显示控制，避免在信息的呈像区域上出现指示标识显示混乱的情况。\n[0164] 在本实施例中提供的指示标识控制系统，通过采集的当前场景图像，确定移动终端的指示方向及该指示方向与信息的呈像区域之间的关联位置，实现通过移动终端对该信息的呈像区域的指示标识，便于用户随时使用任意移动终端在信息的呈像区域上做出指示，即该系统通用性较好，且操作便捷，给用户的工作学习带来便利。\n[0165] 本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。\n[0166] 最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。