一种视频通话中的图像显示方法

1.一种视频通话中的图像显示方法，其特征是包括如下步骤：
S10、对图像进行分层处理，分成背景层和重点表现层；
S12/S12’、对于背景层，传输比较低分辨率的图像或只传输模板编号，对于重点表现层，先生成并传输较低分辨率的图像；并在接收端将收到的低分辨率背景层图像和重点表现层图像合成显示，或者在接收端根据模板编号调出背景模板，并与收到的较低分辨率的重点表现层图像进行合成显示；
S14、对于重点表现层进行逐渐清晰化处理，在接收端生成并显示较高分辨率的重点表现层图像；在步骤S14后还包括如下步骤：S16、对重点表现层进行相对僵化运动显示，并用画中画显示低分辨率的缩略图；
所述相对僵化运动显示的方法包括如下步骤：
S162、发送端利用人脸识别技术识别出人脸的轮廓；
S164、计算出人脸图像的重心；
S166、跟踪计算人脸图像重心的运动轨迹，并传输到接收端；
S168、接收端根据人脸图像重心的运动轨迹，控制先前所生成的较高清晰度的人脸图像在显示屏上运动显示。
2.如权利要求1所述的一种视频通话中的图像显示方法，其特征是：步骤S14中，逐渐清晰化处理的方法包括如下步骤：
S142、将重点表现层中尚未传输的像素分成多帧，每一帧都是一个较低分辨率的图像；
S144、将多帧数据逐帧传到接收端；
S146、接收端将收到的多帧数据复合还原出重点表现层的高清晰度图像。
3.如权利要求1所述的一种视频通话中的图像显示方法，其特征是：在步骤S14后还包括如下步骤：
S16’、对重点表现层进行二次分层，把重点表现层再分成固定层和变化层；
S18、之后发送端只把变化层的部分发送给接收方进行补充显示。
4.如权利要求1所述的一种视频通话中的图像显示方法，其特征是：在步骤S16后还包括如下步骤：接收用户点击缩略图的指令，将缩略图放大，而将高清图变成画中画；接收用户的再次再点击，又切换回来。
5.如权利要求3所述的一种视频通话中的图像显示方法，其特征是：在步骤S16或S18之后还包括如下步骤：
S202、接收端接收用户的输入，记录用户所划定的区域边界坐标；
S204、将用户所划定的区域边界坐标发送到发送端；
S206、发送端拍摄并获取划定区域的高清图像；
S208、将该高清图像分成多帧，逐帧传输到接收端；
S210、接收端将收到的多帧图像合成恢复成高清图像。

一种视频通话中的图像显示方法\n技术领域\n[0001] 本发明涉及一种视频通话中的图像显示方法。\n背景技术\n[0002] 随着3G、4G甚至更高速率的无线网络的普及，视频通话越来越成为手机的常用功能之一，并且有望在4G时代成为手机的杀手级应用。\n[0003] 但是，无线视频通话还有一定的缺点。其一，虽然现在3G、4G的带宽已越来越宽，但按流量计费的模式导致视频通话费用昂贵；其二，网络并不是总能畅通无阻的，当信号较差或用户较多时，常会导致视频通话图像质量变差，从而使用户体验度变差。\n发明内容\n[0004] 本发明的目的就是为了解决现有技术中流量与带宽的不足的情况下视频通话图像质量变差的问题，提供一种视频通话中的图像显示方法，在降低流量的情况下保持视频通话的图像质量能达到用户希望的适当水平。\n[0005] 本发明的视频通话中的图像显示方法包括如下步骤：S10、对图像进行分层处理，分成背景层和重点表现层；S12/S12’、对于背景层，传输比较低分辨率的图像或只传输模板编号，对于重点表现层，先生成并传输较低分辨率的图像；并在接收端将收到的低分辨率背景层图像和重点表现层图像合成显示，或者在接收端根据模板编号调出背景模板，并与收到的较低分辨率的重点表现层图像进行合成显示；S14、对于重点表现层进行逐渐清晰化处理，在接收端生成并显示较高分辨率的重点表现层图像。\n[0006] 优选地，本发明还包括如下改进方案：\n[0007] 在步骤S14后还包括如下步骤：S16、对重点表现层进行相对僵化运动显示，并用画中画显示低分辨率的缩略图。\n[0008] 步骤S14中，逐渐清晰化处理的方法包括如下步骤：S142、将重点表现层中尚未传输的像素分成多帧，每一帧都是一个较低分辨率的图像；S144、将多帧数据逐帧传到接收端；S146、接收端将收到的多帧数据复合还原出重点表现层的高清晰度图像。\n[0009] 所述相对僵化运动显示的方法包括如下步骤：S162、发送端利用人脸识别技术识别出人脸的轮廓；S164、计算出人脸图像的重心；S166、跟踪计算人脸图像重心的运动轨迹，并传输到接收端；S168、接收端根据人脸图像重心的运动轨迹，控制先前所生成的较高清晰度的人脸图像在显示屏上运动显示\n[0010] 在步骤S14后还包括如下步骤：S16’、对重点表现层进行二次分层，把重点表现层再分成固定层和变化层；S18、之后发送端只把变化的部分发送给接收方进行补充显示。\n[0011] 在步骤S16后还包括如下步骤：接收用户点击缩略图的指令，将缩略图放大，而将高清图变成画中画；接收用户的再次再点击，又切换回来。\n[0012] 在步骤S16或S18之后还包括如下步骤：S202、接收端接收用户的输入，记录用户所划定的区域边界坐标；S204、将用户所划定的区域边界坐标发送到发送端；S206、发送端拍摄并获取划定区域的高清图像；S208、将该高清图像分成多帧，逐帧传输到接收端；S210、接收端将收到的多帧图像合成恢复成高清图像。\n[0013] 通过本发明，通过分层区别对待处理，可以将视频通话中的图像流量减小到适当的程度而又不会影响用户对其所关心的部位的观赏。\n[0014] 在优选实施例中，还可以显示高清晰的人脸运动图像；在另一个优选的实施例中，还可以追踪显示图像的变化，这尤其适合于通过视频会议用电子白板讨论问题；在再一个优选的实施例中，用户还可以对其感兴趣的区域进行放大或清晰化显示。\n附图说明\n[0015] 图1是本发明实施例一流程图。\n[0016] 图2是本发明实施例一逐渐清晰化流程图。\n[0017] 图3是本发明实施例一相对僵化运动显示流程图。\n[0018] 图4是本发明实施例二流程图。\n[0019] 图5是本发明划定区域高清化流程图。\n具体实施方式\n[0020] 本发明的创意包括如下几方面：\n[0021] 1）对图像进行分层处理，分成背景层和重点表现层，对背景层，只传输比较低分辨率的图像，对于重点表现层，则先传输比较低分辨率的图像，然后再逐渐清晰化；\n[0022] 2）逐渐清晰化：对于重点表现层，如果是相对静止或运动比较少的图像，比如人脸，则先拍一个高清照片，然后再人为分成多帧（比如100帧），一帧一帧传输，传第一帧时图像清晰度很低，再传一帧图像就比原来清晰一点了，重复补传，直到全部传完，就形成了高清图；在逐渐描清人脸的过程中，信道中只传输很少量的数据，因为传输的只是补充数据，接收方收到补充数据后自动补充到原来较低像素的图像上，生成较高像素的新图像；这需要手机上有软件支持，但并不需要网络支持；\n[0023] 3）高清图像生成后，在接收方的显示屏上相对僵化运动，但另开辟一个画中画小窗口，以较低分辨率接收和显示人脸的缩略图，以显示人脸的运动情况和表情变化；其中，相对僵化运动的人脸其运动方法是：进一步采用人脸识别技术，发送方手机跟踪人脸的运动，计算其人脸图像的重心，计算人脸图像重心的运动情况，把重心的移动轨迹数据实时传送到接收方，接收方根据此运动轨迹数据让高清人脸运动。\n[0024] 点击缩略图，则缩略图放大，而高清图却变成画中画，再点击又切换回来。可以循环往复。\n[0025] 4）增加绘图板功能：当启用绘图板模式时，通话方把绘图板上绘制的内容发送到接收方显示而不是把人脸图像发送过去；处于绘图板模式时，无论前景图像还是重点表现层，均是相对静止或运动比较少的图像，但背景层往往是一个固定的模板，发送方只需要把模板号发过去，接收方调用库里的模板进行显示就完成背景层的显示了，而对于重点表现层，仍然是先直接传输比较低分辨率的图像，然后再逐步描清；此后，由于重点表现层是逐渐变化的图像，等描成高清之后，再把图像二次分层（而不是人脸识别），把重点表现层再分成固定层和变化层，变化层就是由于人手在画线而造成的变化，发送端只把变化的部分发送给接收方，以节省流量。\n[0026] 5）对于4），可以把变化部分进一步变成二值黑白图像数据，或者向量数据，以进一步减小数据传输量。\n[0027] 6）不论哪种情况，发送方或接收方均可通过触摸屏划定一个区域，并指令对该区域的图像进行逐渐高清化处理（这样就可以不限于人脸和变化层，人们对感兴趣的区域都可以逐步高清化）。\n[0028] 实施例一\n[0029] 本实施例描述了一个视频通话双方均显示对方大头像的情景,如图1所示，它包括如下步骤：S8、发送端拍摄一幅较高清晰度的图像；S10、对图像进行分层处理，分成背景层和重点表现层；S12、生成并传输比较低分辨率的背景层和重点表现层图像，并在接收端合成显示；S14、对于重点表现层进行逐渐清晰化处理，在接收端生成并显示较高分辨率的重点表现层图像；S16、对重点表现层进行相对僵化运动显示，并用画中画显示低分辨率的缩略图。\n[0030] 如图2所示，其中步骤S14中对于重点表现层进行逐渐清晰化处理包括如下步骤：\nS142、将重点表现层中尚未传输的像素分成多帧，每一帧都是一个较低分辨率的图像；\nS144、将多帧数据逐帧传到接收端；S146、接收端将收到的多帧数据复合还原出重点表现层的高清晰度图像。\n[0031] 如图3所示，其中步骤S16中对重点表现层进行相对僵化运动显示的方法包括如下步骤：S162、发送端利用人脸识别技术识别出人脸的轮廓；S164、计算出人脸图像的重心；\nS166、跟踪计算人脸图像重心的运动轨迹，并传输到接收端；S168、接收端根据人脸图像重心的运动轨迹，控制先前所生成的较高清晰度的人脸图像在显示屏上运动显示。\n[0032] 实施例二：\n[0033] 如图4所示，本实施例与实施例一的不同在于，视频通话双方中有一方是向对方传输其在电子白板上绘制的图片或书写的文字。其包括如下步骤：S6、发送端选择绘图板模式；S10、对图像进行分层处理，分成背景层和重点表现层；S12’、对于背景层，传输模板编号，对于重点表现层，先生成并传输较低分辨率的图像，在接收端根据模板编号调出背景模板，并与收到的较低分辨率的重点表现层图像进行合成显示；S14、对于重点表现层进行逐渐清晰化处理，在接收端生成并显示较高分辨率的重点表现层图像；S16’、对重点表现层进行二次分层，把重点表现层再分成固定层和变化层；S18、之后发送端只把变化的部分发送给接收方进行补充显示。\n[0034] 本实施例通过两次分层，将背景、重点表现层和变化层分别不同处理，在最大限度减小流量的情况下，保证了用户所关注的部位均能得到很好地传输的显示。其中，还可以把变化部分进一步变成二值黑白图像数据，或者向量数据，以进一步减小数据传输量。\n[0035] 图5所示是一个既适于实施例一又适于实施例二的“划定区域清晰化显示”的方法，它包括如下步骤：S202、接收端接收用户的输入，记录用户所划定的区域边界坐标；\nS204、将用户所划定的区域边界坐标发送到发送端；S206、发送端拍摄并获取划定区域的高清图像；S208、将该高清图像分成多帧，逐帧传输到接收端；S210、接收端将收到的多帧图像合成恢复成高清图像。\n[0036] 这里显示的是接收方想详细了解图像中某一部位的情况。如果是发送方想推送某一部位给接收方详细了解，也可以采用类似的方法处理，只不过是划定区域的是发送方客户而不是接收方客户而已。操作时只要发送方提前跟接收方打个招呼，接收方在发现某个部位突然清晰化时就不会觉得吃惊或感到受到打扰。\n[0037] 上述实施例只是为了便于说明本发明，而不能理解为对本发明的限制。