著录项信息
专利名称 | 一种会议记录方法、会议摄像装置、客户机及系统 |
申请号 | CN201110029615.3 | 申请日期 | 2011-01-27 |
法律状态 | 授权 | 申报国家 | 中国 |
公开/公告日 | 2012-08-01 | 公开/公告号 | CN102625077A |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | H04N7/15 | IPC分类号 | H;0;4;N;7;/;1;5;;;H;0;4;N;5;/;2;3;2;;;G;0;6;F;1;7;/;3;0查看分类表>
|
申请人 | 深圳市合智创盈电子有限公司 | 申请人地址 | 广东省深圳市福田区梅林路三号蓝天绿都家园附楼三楼
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | 深圳市宇恒互动科技开发有限公司 | 当前权利人 | 深圳市宇恒互动科技开发有限公司 |
发明人 | 罗富强;廖明忠 |
代理机构 | 深圳市瑞方达知识产权事务所(普通合伙) | 代理人 | 林俭良 |
摘要
本发明实施例公开了一种会议记录方法,包括:当接收到包括编号信息的请求发言的控制指令时,会议摄像装置在其内部的数据库中查找编号信息所对应的客户机当前的三维坐标,并获取编号信息所对应的客户机用户当前的声音波形数据;会议摄像装置根据三维坐标运算得到旋转角度值,并确定出旋转方向;会议摄像装置根据旋转角度值和旋转方向控制自身进行旋转以拍摄编号信息所对应的客户机用户的视频信息,将得到的音频信息和视频信息发送给中央计算机。本发明实施例还公开了一种会议摄像装置、客户机及系统。本发明可实时根据三维坐标自动调整拍摄角度以追踪拍摄相关用户的视频信息并获取相应的音频信息,满足用户自动化、智能化地进行会议记录需求。
1.一种会议记录方法,其特征在于,包括:
客户机实时获取用户的感测数据,并对所述感测数据进行运算得到用户运动过程中的各个时刻的三维坐标和对应的声音波形数据;
所述会议摄像装置实时接收客户机运算得到的三维坐标、对应的声音波形数据及其编号信息,并按照该客户机的编号信息将接收到的该客户机运算得到的三维坐标和对应的声音波形数据按照时间顺序存储到数据库中;
当接收到包括编号信息的请求发言的控制指令时,所述会议摄像装置在其内部存储的数据库中查找所述编号信息所对应的客户机当前所处的三维坐标,并获取所述编号信息所对应的客户机用户当前的声音波形数据;
根据所述三维坐标运算得到旋转角度值,确定出旋转方向,根据所述旋转角度值和旋转方向控制自身进行旋转并实时拍摄得到视频信息;
根据所述声音波形数据运算得到所述编号信息所对应的客户机用户当前时刻的音频信息;
将拍摄得到的视频信息和运算得到的音频信息发送给中央计算机。
2.如权利要求1所述的方法,其特征在于,还包括:
当接收到所述编号信息所对应的客户机的结束发言的控制指令时,会议摄像装置停止旋转,或者在其内部存储的数据库中查找特定编号信息所对应的客户机当前所处的三维坐标和声音波形数据以获取相应的视频信息和所述特定编号信息所对应的客户机用户的音频信息。
3.如权利要求2所述的方法,其特征在于,还包括:
所述会议摄像装置实时检测所述摄像头旋转过程中的三维坐标,并根据所述三维坐标得到自身旋转过程中的角度值,并在其旋转的角度值达到所述旋转角度值时,控制停止自身的旋转。
4.如权利要求3所述的方法,其特征在于,还包括:
客户机实时检测用户输入的控制指令,并将所述相应的控制指令发送给会议摄像装置,所述控制指令包括:请求发言的控制指令、结束发言的控制指令。
5.如权利要求4所述的方法,其特征在于,还包括:
当接收到包括编号信息的请求发言的控制指令时,会议摄像装置判断当前拍摄的所述编号信息所对应的客户机用户是否达到预设的定点校验位置;
当判断为是时,会议摄像装置向所述编号信息所对应的客户机发送所述预设的定点校验位置的三维坐标;
所述客户机根据所述预设的定点校验位置的三维坐标对自身当前所处的位置的三维坐标进行校正。
6.一种会议摄像装置,其特征在于,包括:
录像模块,用于实时拍摄视频信息;
录像控制模块,用于控制所述录像模块将视频信息传递给通信模块;
通信模块,用于实时接收至少一个客户机根据获取到的感测数据进行运算得到用户运动过程中的各个时刻的三维坐标、声音波形数据及其编号信息;
所述通信模块还用于接收包括编号信息的请求发言的控制指令;
存储模块,用于按照编号信息将实时接收到的相应客户机运算得到的三维坐标和声音波形数据存储到数据库中;
查找模块,用于当所述通信模块接收到包括编号信息的请求发言的控制指令时,到所述存储模块存储的数据库中查找所述编号信息所对应的客户机当前所处的三维坐标,并确定当前接收到的所述编号信息所对应的客户机的声音波形数据为有效音频数据;
运算模块,用于根据所述查找模块查找到的三维坐标运算得到旋转角度值和确定出旋转方向,并对所述包括声音波形数据的有效音频数据进行运算,得到所述编号信息所对应的客户机用户的音频信息;
视角驱动模块,用于根据所述运算模块运算得到的旋转角度值和确定的旋转方向,控制旋转所述录像模块以调整拍摄角度;
所述通信模块还用于将拍摄得到的视频信息和运算得到的音频信息发送给中央计算机。
7.如权利要求6所述的会议摄像装置,其特征在于,还包括:
所述通信模块还用于接收所述编号信息所对应的客户机的结束发言的控制指令;
通知模块,用于在所述通信模块接收到结束发言的控制指令时,通知所述视角驱动模块控制停止所述会议摄像装置的旋转;或者
通知所述查找模块在所述存储模块存储的数据库中查找特定编号信息所对应的客户机当前所处的三维坐标以获取所述特定编号信息所对应的客户机用户的视频信息,并确定特定编号所对应的声音波形数据为有效音频数据以获取所述特定编号信息所对应的客户机用户的音频信息。
8.如权利要求7所述的会议摄像装置,其特征在于,还包括:
视角检测模块,用于在视角驱动模块控制旋转会议摄像装置的过程中,实时检测会议摄像装置旋转的三维坐标,并得到会议摄像装置旋转的角度值,在其旋转的角度值达到所述旋转角度值时,通知所述视角驱动模块停止旋转所述录像模块;
校验判断模块,用于判断当前拍摄的所述编号信息所对应的客户机用户是否达到预设的定点校验位置;
所述通信模块还用于当所述校验判断模块的判断为是时,向所述编号信息所对应的客户机发送所述预设的定点校验位置的三维坐标。
9.一种客户机,其特征在于,包括:
传感器,用于实时获取用户的感测数据,所述感测数据包括:加速度值、角加速度值以及地磁数据中的任一种或多种;
运算模块,用于对所述传感器获取的感测数据进行运算得到用户运动过程中的三维坐标和对应的声音波形数据;
检测模块,用于实时检测用户输入的控制指令,所述控制指令包括:请求发言的控制指令、结束发言的控制指令;
无线通信模块,用于向会议摄像装置发送所述三维坐标和对应的声音波形数据,并用于当所述检测模块检测到用户输入请求发言的控制指令时,向相应的会议摄像装置发送所述请求发言的控制指令,所述控制指令包括所述客户机的编号信息,以使所述会议摄像装置在接收到包括编号信息的请求发言的控制指令时,在其内部存储的数据库中查找所述编号信息所对应的客户机当前所处的三维坐标,并获取所述编号信息所对应的客户机用户当前的声音波形数据,根据所述三维坐标运算得到旋转角度值,确定出旋转方向,根据所述旋转角度值和旋转方向控制自身进行旋转并实时拍摄得到视频信息,根据所述声音波形数据运算得到所述编号信息所对应的客户机用户当前时刻的音频信息,将拍摄得到的视频信息和运算得到的音频信息发送给中央计算机;或者当所述检测模块检测到用户输入结束发言的控制指令时向会议摄像装置发送结束发言的控制指令;还用于向至少一个对端客户机发送本端运算得到的三维坐标,以及接收至少一个对端客户机的三维坐标。
10.如权利要求9所述的客户机,其特征在于,还包括:
所述无线通信模块还用于接收会议摄像装置发送的预设的定点校验位置的三维坐标;
校正模块,用于根据所述预设的定点校验位置的三维坐标对当前所处的位置的三维坐标进行校正。
11.一种会议记录系统,其特征在于,包括:如权利要求6-8任一项所述的会议摄像装置、中央计算机以及至少一个如权利要求9或10所述的客户机。
一种会议记录方法、会议摄像装置、客户机及系统\n技术领域\n[0001] 本发明涉及通信领域,尤其涉及一种会议记录方法、会议摄像装置、客户机及系统。\n背景技术\n[0002] 目前用于视频会议中作会议记录的摄像装置大多是位置固定的,其仅能够拍摄固定范围内的视频信息,或者仅能在会议记录人员手动控制下,进行简单的上下左右的移动以拍摄会场中不同位置或者与会人员的视频信息。\n[0003] 随着科技的进步,出现了采用脸部识别技术,跟踪拍摄相关与会人员的视频信息的会议记录装置及系统,但是,相应的脸部识别技术较为复杂,其实现难度大、成本高;也有采用声音跟踪技术,在相关与会人员发言时,能够跟踪拍摄相应的视频信息的会议记录装置及系统,但是,当出现多人同时发声时,该会议记录装置及系统则容易出错,而不能拍摄到所需的视频信息。\n发明内容\n[0004] 本发明实施例所要解决的技术问题在于,提供一种会议记录方法、会议摄像装置、客户机及系统,可实时得到用户在会场中的三维坐标,根据三维坐标自动调整拍摄角度以追踪相关用户并拍摄相关的视频信息。\n[0005] 为了解决上述技术问题,本发明实施例提供了一种会议记录方法,包括:\n[0006] 当接收到包括编号信息的请求发言的控制指令时,会议摄像装置在其内部存储的数据库中查找所述编号信息所对应的客户机当前所处的三维坐标,并获取所述编号信息所对应的客户机用户当前的声音波形数据;\n[0007] 根据所述三维坐标运算得到旋转角度值,确定出旋转方向,根据所述旋转角度值和旋转方向控制自身进行旋转并实时拍摄得到视频信息;\n[0008] 根据所述声音波形数据运算得到所述编号信息所对应的客户机用户当前时刻的音频信息;\n[0009] 将拍摄得到的视频信息和运算得到的音频信息发送给中央计算机。\n[0010] 其中,所述会议摄像装置在其内部存储的数据库中查找所述编号信息所对应的客户机当前所处的三维坐标,并获取所述编号信息所对应的客户机用户当前的声音波形数据的步骤之前,包括:\n[0011] 客户机实时获取用户的感测数据,并对所述感测数据进行运算得到用户运动过程中的各个时刻的三维坐标和对应的声音波形数据;\n[0012] 会议摄像装置实时接收客户机运算得到的三维坐标、对应的声音波形数据及其编号信息,并按照该客户机的编号信息将接收到的该客户机运算得到的三维坐标和对应的声音波形数据按照时间顺序存储到数据库中。\n[0013] 其中,还包括:当接收到所述编号信息所对应的客户机的结束发言的控制指令时,会议摄像装置停止旋转,或者在其内部存储的数据库中查找特定编号信息所对应的客户机当前所处的三维坐标和声音波形数据以获取相应的视频信息和所述特定编号信息所对应的客户机用户的音频信息。\n[0014] 其中,还包括:所述会议摄像装置实时检测所述摄像头旋转过程中的三维坐标,并根据所述三维坐标得到自身旋转过程中的角度值,并在其旋转的角度值达到所述旋转角度值时,控制停止自身的旋转。\n[0015] 其中,还包括:客户机实时检测用户输入的控制指令,并将所述相应的控制指令发送给会议摄像装置,所述控制指令包括:请求发言的控制指令、结束发言的控制指令。\n[0016] 其中,还包括:\n[0017] 当接收到包括编号信息的请求发言的控制指令时,会议摄像装置判断当前拍摄的所述编号信息所对应的客户机用户是否达到预设的定点校验位置;\n[0018] 当判断为是时,会议摄像装置向所述编号信息所对应的客户机发送所述预设的定点校验位置的三维坐标;\n[0019] 所述客户机根据所述预设的定点校验位置的三维坐标对自身当前所处的位置的三维坐标进行校正。\n[0020] 相应地,本发明实施例还提供了一种会议摄像装置,包括:\n[0021] 录像模块,用于实时拍摄视频信息;\n[0022] 录像控制模块,用于控制所述录像模块将视频信息传递给通信模块;\n[0023] 通信模块,用于实时接收至少一个客户机运算得到的三维坐标、声音波形数据及其编号信息;\n[0024] 所述通信模块还用于接收包括编号信息的请求发言的控制指令;\n[0025] 存储模块,用于按照编号信息将实时接收到的相应客户机运算得到的三维坐标和声音波形数据存储到数据库中;\n[0026] 查找模块,用于当所述通信模块接收到包括编号信息的请求发言的控制指令时,到所述存储模块存储的数据库中查找所述编号信息所对应的客户机当前所处的三维坐标,并确定当前接收到的所述编号信息所对应的客户机的声音波形数据为有效音频数据;\n[0027] 运算模块,用于根据所述查找模块查找到的三维坐标运算得到旋转角度值和确定出旋转方向,并对所述包括声音波形数据的有效音频数据进行运算,得到所述编号信息所对应的客户机用户的音频信息;\n[0028] 视角驱动模块,用于根据所述运算模块运算得到的旋转角度值和确定的旋转方向,控制旋转所述录像模块以调整拍摄角度;\n[0029] 所述通信模块还用于将拍摄得到的视频信息和运算得到的音频信息发送给中央计算机。\n[0030] 其中,还包括:\n[0031] 所述通信模块还用于接收所述编号信息所对应的客户机的结束发言的控制指令;\n[0032] 通知模块,用于在所述通信模块接收到结束发言的控制指令时,通知所述视角驱动模块控制停止所述会议摄像装置的旋转;或者\n[0033] 通知所述查找模块在所述存储模块存储的数据库中查找特定编号信息所对应的客户机当前所处的三维坐标以获取所述特定编号信息所对应的客户机用户的视频信息,并确定特定编号所对应的声音波形数据为有效音频数据以获取所述特定编号信息所对应的客户机用户的音频信息。\n[0034] 其中,还包括:\n[0035] 视角检测模块,用于在视角驱动模块控制旋转会议摄像装置的过程中,实时检测会议摄像装置旋转的三维坐标,并得到会议摄像装置旋转的角度值,在其旋转的角度值达到所述旋转角度值时,通知所述视角驱动模块停止旋转所述会议摄像装置;\n[0036] 校验判断模块,用于判断当前拍摄的所述编号信息所对应的客户机用户是否达到预设的定点校验位置;\n[0037] 所述通信模块还用于当所述校验判断模块的判断为是时,向所述编号信息所对应的客户机发送所述预设的定点校验位置的三维坐标。\n[0038] 相应地,本发明实施例还提供了一种客户机,包括:\n[0039] 传感器,用于实时获取用户的感测数据,所述感测数据包括:加速度值、角加速度值以及地磁数据中的任一种或多种;\n[0040] 运算模块,用于对所述传感器获取的感测数据进行运算得到用户运动过程中的三维坐标和对应的声音波形数据;\n[0041] 检测模块,用于实时检测用户输入的控制指令,所述控制指令包括:请求发言的控制指令、结束发言的控制指令;\n[0042] 无线通信模块,用于向会议摄像装置发送所述三维坐标和对应的声音波形数据,并用于当所述检测模块检测到用户输入请求发言的控制指令时,向相应的会议摄像装置发送所述请求发言的控制指令;或者当所述检测模块检测到用户输入结束发言的控制指令时向会议摄像装置发送结束发言的控制指令;还用于向至少一个对端客户机发送本端运算得到的三维坐标,以及接收至少一个对端客户机的三维坐标。\n[0043] 其中,还包括:\n[0044] 所述无线通信模块还用于接收会议摄像装置发送的预设的定点校验位置的三维坐标;\n[0045] 校正模块,用于根据所述预设的定点校验位置的三维坐标对当前所处的位置的三维坐标进行校正。\n[0046] 相应地,本发明实施例还提供了一种会议记录系统,包括:如权利要求8-10任一项所述的会议摄像装置、中央计算机以及至少一个如权利要求11或12所述的客户机。\n[0047] 实施本发明实施例,具有如下有益效果:\n[0048] 通过采用多个传感器分别实时感测相应用户在会场中的三维坐标和声音波形数据,摄像装置分别按照编号信息对应存储相应所述三维坐标和声音波形数据,在接收到请求发言的控制指令时,摄像装置按照编号信息通过简单的查找便可找到所述编号信息对应的用户在会场中的位置,从而计算旋转角度确定旋转方向进行旋转,自动地对相应用户的拍摄跟踪,还能通过声音波形数据同步获取用户的音频信息,实现方式简单,抗干扰能力强,能够较好的满足用户的自动化、智能化地进行包括视频与音频记录的会议记录的需求;\n另外,还能通过会场中的标定器或者固定的校验标识等对用户的三维坐标的漂移进行校正,提高了摄像装置自动拍摄的精度。\n附图说明\n[0049] 图1是本发明实施例的一种会议记录系统的结构组成示意图;\n[0050] 图2是本发明实施例的一种客户机的结构组成示意图;\n[0051] 图3是本发明实施例的一种会议摄像装置的结构组成示意图;\n[0052] 图4是本发明的一种会议记录方法的第一实施例流程示意图;\n[0053] 图5是本发明的一种会议记录方法的第二实施例流程示意图。\n具体实施方式\n[0054] 下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。\n[0055] 请参见图1,是本发明实施例的一种会议记录系统的结构组成示意图,本实施例的所述会议记录系统包括:会议摄像装置1,中央计算机2以及多个客户机(图中仅对其一进行标号),各个客户机的结构、功能以及实现方式均相同,本实施例中以客户机3为例进行说明,其他客户机均做相同分析,在此不赘述。\n[0056] 所述客户机3可在用户进入会场时发放给用户,用户可将所述客户机置于胸前,设置在腮帮处、喉部等位置中。对所述客户机3设置唯一的编号,以便与其他客户机相区别。\n[0057] 具体的,如图2所示,是本发明实施例的一种客户机的结构组成示意图,所述客户机3具体包括:\n[0058] 传感器31,用于实时获取用户的感测数据,所述感测数据包括:加速度值、角加速度值以及地磁数据中的任一种或多种;\n[0059] 运算模块32,用于对所述传感器31获取的感测数据进行运算得到用户运动过程中的三维坐标和对应的声音波形数据;\n[0060] 无线通信模块33,用于向会议摄像装置1发送所述三维坐标和对应的声音波形数据;\n[0061] 具体的,所述传感器可包括加速度传感器、陀螺仪以及地磁仪中的任一种或多种。\n启动所述客户机3后,所述传感器31便可实时获取其所对应的用户在运动时的包括加速度值、角加速度值以及地磁数据中的任一种或多种的感测数据;并同时获取用户腮部等发声位置在振动过程中的感测数据。所述运算模块32根据所述加速度值、角加速度值以及地磁数据中的任一种或多种结合时间值进行数据运算,得到运算后的数据包括用户移动过程中的三维坐标以及相关发声位置如声带振动产生的三维坐标,然后根据相邻时刻下三维坐标的变化幅度以及频率对运算后的数据进行分离,得到用户运动过程中的三维坐标和对应的声音波形数据。\n[0062] 另外,所述时间值从启动所述客户机3开始计算。计算得到相应的三维坐标的同时,所述无线通信模块33可通过无线短距2.4G技术、蓝牙或者紫蜂Zigbee等无线传输方式将所述三维坐标和声音波形数据进行编码后发送给所述会议摄像装置1;\n[0063] 需要说明的是,启动所述客户机3时的位置作为运算用户移动过程中的三维坐标的坐标原点,通常将会议入口处位置的坐标设置为运算的坐标原点。另外,为了使会议摄像装置1能够更好的拍摄到用户的脸部位置,可在启动所述客户机3时,进行会议摄像装置1的拍摄调试,例如,若用户将所述客户机3挂在胸前,则调整所述会议摄像装置1拍摄所述客户机3的实际拍摄位置为向上移动相应的角度拍摄该用户的脸部,并将该实际拍摄角度和所述客户机3的编号保存在会议摄像装置1内部存储器的数据库中以便于在后续跟踪拍摄相时,所述会议摄像装置1可根据该角度拍摄到相应客户端用户的脸部。\n[0064] 进一步的,如图2所示,所述客户机3还包括:\n[0065] 检测模块34,用于实时检测用户输入的控制指令,所述控制指令包括:请求发言的控制指令、结束发言的控制指令。\n[0066] 所述无线通信模块33还用于当所述检测模块检测到用户输入请求发言的控制指令时,向所述会议摄像装置1发送所述请求发言的控制指令;或者当所述检测模块34检测到用户输入结束发言的控制指令时向所述会议摄像装置1发送结束发言的控制指令;还用于根据其内部存储的对端编号信息,向至少一个对端客户机发送本端运算得到的三维坐标,以及接收对端客户机的三维坐标;\n[0067] 所述检测模块34可采用检测动作约定的方式,实时检测用户输入的控制指令。具体实现过程为:在所述客户机3中预置动作约定数据库,所述动作约定数据库中包括动作约定(统计得到的各类动作的轨迹特征)以及与所述动作约定一一对应的控制命令,当用户按照约定动作控制所述客户机3运动时,例如敲击所述客户机3使其产生振动,所述客户机\n3中的传感器31便感测得到该振动,所述运算模块32还用于对所述振动数据进行运算,得到振动轨迹并识别出轨迹特征,根据所述轨迹特征在所述动作约定数据库中查找相应的控制命令如请求发言的控制命令,结束发言的控制命令等。\n[0068] 在所述客户机3使用过程中,所述无线通信模块33还用于实时地接收会议摄像装置1发送的预设的定点校验位置的三维坐标;进一步的,如图2所示,所述客户机3还包括:\n校正模块35,用于根据所述预设的定点校验位置的三维坐标对当前所处的位置的三维坐标进行校正。即所述校正模块35将当前运算模块32运算得到的三维坐标修改成所述无线通信模块33接收到的预设的定点校验位置的三维坐标,并发送通知指令给所述运算模块32,所述运算模块32则根据当前修改后的三维坐标进行新的三维坐标的运算。其中,所述预设的定点校验位置可以是在会场中坐标固定的一些物体,如特定的一幅画,固定的座椅,或者为在会场中坐标固定的,由预先设置的可在近距离中感应到所述客户机3的无线定位器。\n另外,所述校正模块35还可根据所述无线通信模块33接收到的至少一个对端客户机的三维坐标作为位置参考,进行本端计算得到的三维坐标的校正。\n[0069] 需要说明的是,所述客户机3中的运算模块32、检查模块34以及校正模块35可内置于一个单片机中,由所述单片机完成各模块的相应功能。\n[0070] 进一步的,再请参见图3,是本发明实施例的一种会议摄像装置的结构组成示意图,所述会议摄像装置1包括:\n[0071] 录像模块11,用于实时拍摄视频信息;所述录像模块11在所述会议摄像装置1启动运行后,一直处于拍摄工作状态,得到会场相应的视频信息,并由录像控制模块19控制录像模块11将视频信息传递给通信模块12。\n[0072] 通信模块12,用于实时接收本系统中所有客户机运算得到的三维坐标、声音波形数据和相应的三维坐标所对应的客户机的编号信息;\n[0073] 具体的,所述通信模块12可包括一个与各客户机通信的无线通信单元121和与中央计算机2进行通信的通信单元122;所述通信模块12的无线通信单元121与所述客户机\n3的无线通信模块33相匹配,其对传输数据的编解码规则与所述客户机3的编解码规则相同,用于实时接收所有客户机各自发送的三维坐标、声音波形数据及其编号信息;所述通信模块12的通信单元122与所述中央计算机2相连接,实现与所述中央计算机2的有线或者无线连接。\n[0074] 存储模块13,用于按照编号信息将实时接收到的相应客户机运算得到的三维坐标和声音波形数据存储到数据库中;\n[0075] 具体的,所述存储模块13按照时间顺序,将接收到的三维坐标和声音波形数据存储在所述编号信息所对应的目录下,以便于在接收到某一客户机发送的请求发言的控制指令时,能够根据编号信息查找到所述客户机当前所处的三维坐标并运算得到其对应用户的声音信息。\n[0076] 进一步的,如图3所示,所述会议摄像装置1还包括:\n[0077] 所述通信模块12还用于接收包括编号信息的请求发言的控制指令;\n[0078] 查找模块14,用于当所述通信模块12接收到包括编号信息的请求发言的控制指令时,到所述存储模块13存储的数据库中查找所述编号信息所对应的客户机当前所处的三维坐标,并确定当前接收到的所述编号信息所对应的客户机的声音波形数据为有效音频数据;\n[0079] 运算模块15,用于根据所述查找模块14查找到的三维坐标运算得到旋转角度值和确定出旋转方向,并对所述包括声音波形数据的有效音频数据进行运算,得到所述编号信息所对应的客户机用户的音频信息;\n[0080] 视角驱动模块16,用于根据所述运算模块15运算得到的旋转角度值和确定的旋转方向,控制旋转所述录像模块11以调整拍摄角度;\n[0081] 所述通信模块12还用于由所述通信单元122通过无线或者有线传输方式将拍摄得到的视频信息和运算得到的音频信息发送给所述中央计算机2。\n[0082] 具体的,所述会议摄像装置1还可通过所述通信模块12接收所述客户机3发送的请求发言的控制指令或者结束发言的控制指令;所述通信模块12接收相应的请求发言的控制指令是按照时间顺序接收到,当多个客户机发送相应的请求发言的控制指令时,所述通信模块12只筛选出最先接收到的相应客户机的请求发言的控制指令,并在接收到该客户机发送的结束发言的控制指令之前,并不对其他用户发送的请求发言控制指令进行如解码等操作处理。\n[0083] 当所述通信模块12的所述无线通信单元121接收到所述客户机3发送的包括所述客户机3的编号信息的请求发言的控制指令时,所述查找模块14到所述存储模块13中存储的数据库中查找所述编号信息所对应的所述客户机3当前时刻值所处的三维坐标,并确定当前接收到的所述编号信息所对应的客户机的声音波形数据为有效音频数据,所述运算模块15根据所述三维坐标运算得到旋转角度值,确定出旋转方向,并根据通信模块12当前所接收到的所述客户机3的声音波形数据运算得到音频信息。\n[0084] 当然,所述客户机3也可以根据感测到的用户的腮帮等发声部位在发声振动时的感测数据,直接计算得到音频数据,并将该音频数据发送给所述会议摄像装置1,所述会议摄像装置1直接确定相应编号信息所对应的音频信息为有效音频信息,并将该有效音频信息与相应的视频信息同步发送给中央计算机2进行记录存储。\n[0085] 所述视角驱动模块16根据所述旋转角度值和确定的旋转方向,控制旋转所述录像模块11的摄像头以调整拍摄角度,同时所述通信模块12的所述通信单元122将拍摄得到的视频信息发送给所述中央计算机2,并将计算得到的音频信息同步发送给所述中央计算机2。其中,所述旋转角度的运算可通过查找的方式实现,具体的,可预先设置数据库,所述数据库中存储当前会场中各个位置的三维坐标和与各位置的三维坐标相对应的会议摄像装置1的旋转角度,当得到相应编号所对应的客户机在会场中的三维坐标时,便可在所述数据库中查找到相应的旋转角度。\n[0086] 进一步的,如图3所示,所述会议摄像装置1还包括:\n[0087] 通知模块,用于在所述通信模块12接收到结束发言的控制指令时,通知所述视角驱动模块16控制停止所述会议摄像装置的旋转;或者\n[0088] 通知所述查找模块14在所述存储模块13存储的数据库中查找特定编号信息所对应的客户机当前所处的三维坐标和声音波形数据,以获取相应的视频信息和所述特定编号信息所对应的客户机用户的音频信息。\n[0089] 当所述通信模块12接收到所述客户机3发送的结束发言的控制指令时,所述通知模块通知所述视角驱动模块16控制停止所述会议摄像装置1旋转;或者通知模块通知所述查找模块14查找特定编号信息对应的客户机用户如主持人当前所处的三维坐标,并确定特定编号所对应的声音波形数据为有效音频数据,所述运算模块15运算得到旋转角度值、旋转方向以及所述特定编号信息所对应的客户机用户当前时刻的音频信息,所述视角驱动模块16控制所述会议摄像装置1根据旋转角度值和旋转方向进行旋转拍摄相应的视频信息,所述通信模块12的所述通信单元122通过无线或者有线的方式将当前的如主持人的视频信息和音频信息发送给所述中央计算机2。\n[0090] 之后,在再次接收到新的包括编号信息的请求发言的控制指令时,重新进行相应编号信息的客户机的三维坐标的查找,旋转角度的运算以及方向的确定,以获取新用户相应的视频信息,并将接收到的新用户的声音波形数据作为有效音频数据以获取该用户的音频信息。\n[0091] 进一步的,如图3所示,所述会议摄像装置1还包括:\n[0092] 视角检测模块17,用于在视角驱动模块16控制旋转会议摄像装置1调整拍摄角度的过程中,实时检测会议摄像装置1旋转的三维坐标,并得到会议摄像装置旋转的角度值,在其旋转的角度值达到所述旋转角度值时,通知所述视角驱动模块16停止旋转所述会议摄像装置;\n[0093] 校验判断模块18,用于判断当前拍摄的所述编号信息所对应的客户机用户是否达到预设的定点校验位置;\n[0094] 所述通信模块12还用于当所述校验判断模块18的判断为是时,通过所述无线通信单元121向所述编号信息所对应的客户机发送所述预设的定点校验位置的三维坐标。\n[0095] 具体的,所述视角检测模块17可以用光栅或者其他旋转电位器组成三维检测部件,并内部的单片机对检测数据进行计算得到相应的会议摄像装置1旋转过程中的旋转角度。\n[0096] 在所述视角驱动模块16根据旋转角度进行旋转以调整拍摄角度拍摄所述客户机\n3所对应的视频信息的过程中,所述视角检测模块17实时检测会议摄像装置1旋转的三维坐标,并得到会议摄像装置1旋转的角度值;在其旋转的角度值达到所述运算模块15运算得到的旋转角度值时,所述视角检测模块17发送停止指令通知所述视角驱动模块16停止所述会议摄像装置的旋转。\n[0097] 在当所述客户机3移动时,所述通信模块12会获取到新的所述客户机3的三维坐标,此时,所述查找模块13便可查找到新的三维坐标,所述运算模块15根据所述查找模块\n14查找到的新的三维坐标,重新进行旋转角度运算和旋转方向的确定,所述视角驱动模块\n16再次进行现有的旋转操作,以实现跟踪拍摄所述客户机3所对应用户的视频信息。并实时的将相应的视频信息以及音频信息发送给所述中央计算机2。\n[0098] 需要说明的是,所述会议摄像装置1中的查找模块14、运算模块15、视角驱动模块\n16、通知模块、视角检测模块17以及校验判断模块18可内置于一个单片机中,由所述单片机完成各模块的相应功能。\n[0099] 所述中央计算机2存储相应的所述会议摄像装置1拍摄得到的视频信息以及同步获取的音频信息。当然,主持人也可通过所述中央计算机2中显示的会场中各客户机相应的编号信息,选择其中一个编号,所述中央计算机2将主持人选择的所述编号信息发送给会议摄像装置1,所述会议摄像装置1根据该编号信息主动进行相应编号信息所对应的三维坐标的查找,以及旋转角度的运算和旋转方向的确定,从而精确地找到主持人所选择的编号信息所对应的客户机用户,获取相关的视频信息以及音频信息。\n[0100] 下面对本实施例的会议记录系统和系统中各装置中的各个功能模块之间的协作关系进行描述。\n[0101] 客户机发放给相应的与会人员,所有的客户机与所述会议摄像装置1通过无线方式相连接。以客户机3为例,所述客户机3通过所述传感器31实时获取用户的感测数据,所述传感器31将获取的感测数据发送给所述运算模块32进行运算,所述运算模块32将运算得到的数据通过无线通信模块33发送给会议摄像装置;所述客户机3通过检测模块34实时检测用户输入的控制指令,并通过无线通信模块33向相应的会议摄像装置1发送所述请求发言的控制指令或者结束发言的控制指令。校正模块35则根据无线通信模块33接收到的预设的定点校验位置的三维坐标对当前所处的位置的三维坐标进行校正。\n[0102] 会议摄像装置1设置在会场特定位置处,在启动系统进行会议记录时,会议摄像装置1的录像模块11便处于摄像状态,并由录像控制模块19控制所述录像模块11将视频信息传递给通信模块12。通信模块12中的无线通信单元121接收会场中各个客户机的指令和数据,查找模块14根据所述通信模块12接收到的指令查找相应的运动数据供运算模块15运算确定旋转方向,并运算得到音频信息,视角驱动模块16根据运算模块15确定的旋转方控制录像模块11的摄像头旋转,录像模块11相应地获取视频信息,并与之前运算模块15得到的音频信息通过通信模块12的通信单元122同步发送给中央计算机2。视角驱动模块16在控制录像模块11旋转的过程中,当视角检测模块17检测到录像模块11的摄像头旋转的角度值达所确定的旋转角度值时,视角驱动模块16停止旋转录像装置11的摄像头。\n[0103] 或者在通知模块根据通信模块12接收到的结束发言的控制指令,通知视角驱动模块16控制停止录像模块11的旋转;或者通知查找模块14在存储模块13存储的数据库中查找特定编号信息所对应的客户机的运动数据,由运算模块15确定拍摄特定编号的用户的旋转角度,并运算得到相应的音频信息。视角驱动模块16再次根据运算模块15确定拍摄特定编号的用户的旋转角度和视角检测模块17检测到的信息,控制录像模块11旋转,拍摄主持人等特定编号的用户的视频信息,并通过通信单元122将该特定编号的用户的视频信息和音频信息同步发送给中央计算机2。\n[0104] 当校验判断模块18检测到当前拍摄的所述编号信息所对应的客户机用户达到预设的定点校验位置时,通过通信模块12的无线通信单元121向所述编号信息所对应的客户机发送所述预设的定点校验位置的三维坐标。\n[0105] 中央计算机2主要用于记录存储会议过程中由会议摄像装置1发送过来的视频信息、音频信息等,以供相应的人员调用查看。\n[0106] 通过上述实施例的描述可知,本发明具有以下优点:\n[0107] 通过采用多个传感器分别实时感测相应用户在会场中的三维坐标和声音波形数据,摄像装置分别按照编号信息对应存储相应所述三维坐标,在接收到请求发言的控制指令时,摄像装置按照编号信息通过简单的查找便可找到所述编号信息对应的用户在会场中的位置,从而计算旋转角度确定旋转方向进行旋转,自动地对相应用户的拍摄跟踪,还能根据当前接收到的该用户的声音波形数据同步获取用户的音频信息,实现方式简单,抗干扰能力强,能够较好的满足用户的自动化、智能化地进行包括视频与音频记录的会议记录的需求;另外,还能通过会场中的标定器或者固定的校验标识等对用户的三维坐标的漂移进行校正,提高了摄像装置自动拍摄的精度。\n[0108] 下面对本发明的一种会议记录方法进行说明。\n[0109] 请参见图4,是本发明的一种会议记录方法的第一实施例流程示意图;该方法包括:\n[0110] S401:当接收到包括编号信息的请求发言的控制指令时,会议摄像装置在其内部存储的数据库中查找所述编号信息所对应的客户机当前所处的三维坐标,并获取所述编号信息所对应的客户机用户当前的声音波形数据;\n[0111] 具体的,所述会议摄像装置在其内部存储得到会场中各个客户机的坐标数据的数据库的步骤包括:\n[0112] 各个客户机(包括特定用户如主持人的客户机)实时获取其对应用户的感测数据,对所述感测数据进行运算得到用户运动过程中的各个时刻下的,包括用户移动过程中的三维坐标以及相关发声位置如声带振动产生的三维坐标,其中,所述感测数据包括:用户移动过程中的感测数据和用户腮部等发声位置在振动过程中的感测数据,具体包括加速度值、角加速度值以及地磁数据中的任一种或多种。各个客户机分别将运算得到的各自的三维坐标以及编号信息通过无线通信方式发送给会议摄像装置;\n[0113] 三维坐标和声音波形数据的运算过程为:根据所述加速度值、角加速度值以及地磁数据中的任一种或多种结合时间值进行数据运算,得到运算后的包括移动过程中的三维坐标和相关振动产生的三维坐标的数据,然后根据相邻时刻下三维坐标的变化幅度以及频率对运算后的数据进行分离,从而分别得到用户运动过程中的三维坐标和对应的声音波形数据,其中的声音波形数据是根据运算得到的相关振动产生的三维坐标得到的。\n[0114] 会议摄像装置实时接收每一个客户机运算得到的三维坐标、对应的声音波形数据及其编号信息,并按照该客户机的编号信息将接收到的该客户机运算得到的各个三维坐标按照时间顺序存储到数据库中。\n[0115] 所述S401接收相应的请求发言的控制指令后,按照时间顺序对接收到的多个客户机发送相应的请求发言的控制指令进行筛选,所述S401只筛选出最先接收到的相应客户机的请求发言的控制指令,并在接收到该客户机发送的结束发言的控制指令之前,并不对其他用户发送的请求发言控制指令进行如解码等操作处理。\n[0116] S402:会议摄像装置根据所述三维坐标运算得到旋转角度值,确定出旋转方向,根据所述旋转角度值和旋转方向控制自身进行旋转并实时拍摄得到视频信息;\n[0117] 具体的,所述会议摄像装置的摄像头一直处于拍摄的工作状态,当所述S402根据所述三维坐标运算得到旋转角度值,确定出旋转方向后,需要选择会议摄像装置以继续拍摄所需的视频。\n[0118] 所述旋转角度的运算可通过查找的方式实现,具体的,可预先设置数据库,所述数据库中存储当前会场中各个位置的三维坐标和与各位置的三维坐标相对应的会议摄像装置的旋转角度,当得到相应编号所对应的客户机在会场中的三维坐标时,便可在所述数据库中查找到相应的旋转角度。\n[0119] 在根据旋转角度值向所述旋转方向进行旋转时,会议摄像装置还会实时检测所述摄像头旋转过程中的三维坐标,并根据所述三维坐标得到自身旋转过程中的角度值,并在其旋转的角度值达到所述旋转角度值时,控制停止自身的旋转。\n[0120] 当所述编号信息所对应的客户机用户移动时,所述S401会查找到新的三维坐标,所述S402会计算出新的旋转角度值并确定出旋转方向,所述S403则重新根据所述旋转方向和旋转角度进行旋转控制。\n[0121] S403:根据所述声音波形数据运算得到所述编号信息所对应的客户机用户当前时刻的音频信息;\n[0122] 具体的,对于接收到的各客户机的声音波形数据,会议摄像装置并不保存到相应的数据库中,仅当S401根据接收的包括编号信息的请求发言的控制指令,确定某一编号信息所对应的用户为发言人后,S403确定当前时刻接收到的该发言人的编号信息所对应的声音波形数据为有效音频数据,根据所述声音波形数据运算得到所述编号信息所对应的客户机用户当前时刻的音频信息;\n[0123] 客户机获取声音波形数据的过程具体为:将所述传感器置于用户的腮帮、喉部等位置,当用户发声时,其声带会相应的发生振动,所述传感器可对用户声带的振动进行感测,从而获取声带振动时相应的振动感测数据;采用目前的各种模拟/数字转换模块对得到的所述运动感测数据进行相应的模拟数据到数字数据的转换,得到数字振动信号;对所述数字振动信号进行数据融合运算得到振幅和频率等数据后得到数字声音信号;对所述数字声音信号进行整形、滤波、去噪处理后便可得到音质较好的音频信息;\n[0124] S404:将拍摄得到的视频信息和运算得到的音频信息发送给中央计算机。\n[0125] 具体的,所述S404可通过有线传输方式或无线传输方式将拍摄得到的视频信息和运算得到的音频信息发送给中央计算机,以便于所述中央计算机进行数据存储实现会议记录。\n[0126] 另外,客户机也可以根据感测到的用户的腮帮等发声部位在发声振动时的感测数据,直接计算得到音频数据,并将该音频数据发送给会议摄像装置,会议摄像装置在S403中直接确定相应编号信息所对应的音频信息为有效音频信息,并将该有效音频信息与相应的视频信息同步发送给中央计算机进行记录存储。\n[0127] 通过上述实施例的描述可知,本发明具有以下优点:\n[0128] 通过采用多个传感器分别实时感测相应用户在会场中的三维坐标和声音波形数据,摄像装置分别按照编号信息对应存储相应所述三维坐标和声音波形数据,在接收到请求发言的控制指令时,摄像装置按照编号信息通过简单的查找便可找到所述编号信息对应的用户在会场中的位置,从而计算旋转角度确定旋转方向进行旋转,自动地对相应用户的拍摄跟踪,还能通过声音波形数据同步获取用户的音频信息,实现方式简单,抗干扰能力强,能够较好的满足用户的自动化、智能化地进行包括视频与音频记录的会议记录的需求;\n另外,还能通过会场中的标定器或者固定的校验标识等对用户的三维坐标的漂移进行校正,提高了摄像装置自动拍摄的精度。\n[0129] 再请参见图5,是本发明的一种会议记录方法的第二实施例流程示意图,该方法包括:\n[0130] S501:客户机实时检测用户输入的控制指令,所述控制指令包括:请求发言的控制指令、结束发言的控制指令;\n[0131] 具体的,客户机实时检测用户是否按约定的敲击客户机等输入方式输入控制指。\n[0132] S502:当用户输入的控制指令为请求发言的控制指令时,所述客户机将所述请求发言的控制指令发送给会议摄像装置;\n[0133] S503:当接收到包括编号信息的请求发言的控制指令时,会议摄像装置在其内部存储的数据库中查找所述编号信息所对应的客户机当前所处的三维坐标,并获取所述编号信息所对应的客户机用户当前的声音波形数据;\n[0134] 具体的,所述会议摄像装置在其内部存储得到会场中各个客户机的坐标数据的数据库的步骤包括:\n[0135] 各个客户机实时获取其对应用户的感测数据,对所述感测数据进行运算得到用户运动过程中的各三维坐标,其中,所述感测数据包括:加速度值、角加速度值以及地磁数据中的任一种或多种,并将运算得到的各个客户机三维坐标、对应的声音波形数据以及编号信息通过无线通信方式发送给会议摄像装置;\n[0136] 会议摄像装置实时接收每一个客户机运算得到的三维坐标、对应的声音波形数据及其编号信息,并按照该客户机的编号信息,将接收到的该客户机运算得到的各个三维坐标按照时间顺序存储到数据库中。\n[0137] S504:会议摄像装置根据所述三维坐标运算得到旋转角度值,确定出旋转方向,根据所述旋转角度值和旋转方向控制自身进行旋转并实时拍摄得到视频信息,根据所述声音波形数据运算得到所述编号信息所对应的客户机用户当前时刻的音频信息;\n[0138] 具体的,在旋转过程中,所述会议摄像装置实时检测所述摄像头旋转过程中的三维坐标,并根据所述坐标得到自身旋转过程中的角度值,在其旋转的角度值达到所述旋转角度值时,控制停止自身的旋转。\n[0139] 对于接收到的各客户机的声音波形数据,会议摄像装置并不保存到相应的数据库中,仅当S502根据接收的包括编号信息的请求发言的控制指令,确定某一编号信息所对应的用户为发言人后,S504确定当前时刻接收到的该发言人的编号信息所对应的声音波形数据为有效音频数据,根据所述声音波形数据运算得到所述编号信息所对应的客户机用户当前时刻的音频信息。\n[0140] S505:将拍摄得到的视频信息和运算得到的音频信息发送给中央计算机。\n[0141] S511:当接收到包括编号信息的请求发言的控制指令时,会议摄像装置判断当前拍摄的所述编号信息所对应的客户机用户是否达到预设的定点校验位置;\n[0142] S512:当判断为是时,会议摄像装置向所述编号信息所对应的客户机发送所述预设的定点校验位置的三维坐标;\n[0143] S513:所述客户机根据所述预设的定点校验位置的三维坐标对自身当前所处的位置的三维坐标进行校正;\n[0144] 具体的,所述S513将当前客户机运算得到的三维坐标修改成所述接收到的预设的定点校验位置的三维坐标,并根据当前修改后的三维坐标进行新的三维坐标的运算。其中,所述预设的定点校验位置可以是会场中固定一些如特定的一幅画,固定的座椅,或者设定的可在近距离中感应到客户机的无线定位器。\n[0145] 另外,还可通过接收到的其他客户机的三维坐标作为位置参考,对本端计算得到的三维坐标进行校正。\n[0146] S520:当接收到所述编号信息所对应的客户机的结束发言的控制指令时,会议摄像装置停止旋转;\n[0147] 当然,S520也可以执行如下步骤:会议摄像装置在其内部存储的数据库中查找特定编号信息所对应的客户机(如主持人)当前所处的三维坐标和声音波形数据以获取相应的用户(如主持人)的视频信息和所述特定编号信息所对应的客户机用户(如主持人)的音频信息。执行S520后,所述会议摄像装置等待接收下一次的包括编号信息的请求发言的控制指令,并在接收到包括编号信息的请求发言的控制指令时,会议摄像装置从S503开始执行相应步骤。\n[0148] 通过上述实施例的描述可知,本发明具有以下优点:\n[0149] 通过采用多个传感器分别实时感测相应用户在会场中的三维坐标和声音波形数据,摄像装置分别按照编号信息对应存储相应所述三维坐标和声音波形数据,在接收到请求发言的控制指令时,摄像装置按照编号信息通过简单的查找便可找到所述编号信息对应的用户在会场中的位置,从而计算旋转角度确定旋转方向进行旋转,自动地对相应用户的拍摄跟踪,还能通过声音波形数据同步获取用户的音频信息,实现方式简单,抗干扰能力强,能够较好的满足用户的自动化、智能化地进行包括视频与音频记录的会议记录的需求;\n另外,还能通过会场中的标定器或者固定的校验标识等对用户的三维坐标的漂移进行校正,提高了摄像装置自动拍摄的精度。\n[0150] 本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。\n[0151] 以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。
法律信息
- 2023-01-06
未缴年费专利权终止
IPC(主分类): H04N 7/15
专利号: ZL 201110029615.3
申请日: 2011.01.27
授权公告日: 2015.04.22
- 2015-04-22
- 2015-04-15
著录事项变更
申请人由深圳市合智创盈电子有限公司变更为深圳市宇恒互动科技开发有限公司
地址由518000 广东省深圳市福田区梅林路三号蓝天绿都家园附楼三楼变更为518049 广东省深圳市福田区梅林路三号蓝天绿都家园附楼三楼
- 2012-09-26
实质审查的生效
IPC(主分类): H04N 7/15
专利申请号: 201110029615.3
申请日: 2011.01.27
- 2012-08-01
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 |
1
| |
2010-09-29
|
2010-05-10
| | |
2
| |
2009-02-11
|
2008-09-18
| | |
3
| |
2010-05-26
|
2009-09-27
| | |
4
| |
2009-03-18
|
2007-02-21
| | |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有被任何外部专利所引用! |