一种跨模态情感迁移方法及装置

发明专利有效专利

申请号：
CN201910163381.8
IPC分类号：G06K9/00;G06T11/00;G10L25/63
申请日期：
2019-04-17
申请人：
北京入思技术有限公司

基础信息

权利要求

说明书

PDF全文

法律信息

引证文献

著录项信息

专利名称	一种跨模态情感迁移方法及装置
申请号	CN201910163381.8	申请日期	2019-04-17
法律状态	公开	申报国家	中国
公开/公告日	2020-10-27	公开/公告号	CN111832331A
优先权	暂无	优先权号	暂无
主分类号	G06K9/00 ? IPC结构图谱： G 物理 G0 仪器 G06 计算；推算；计数 G06K 数据识别；数据表示；记录载体；记录载体的处理（印刷本身入B41J） G06K9/00 用于阅读或识别印刷或书写字符或者用于识别图形，例如，指纹的方法或装置（用于图表阅读或者将诸如力或现状态的机械参量的图形转换为电信号的方法或装置入G06K 11/00；语音识别入G10L 15/00）〔1，7〕	IPC分类号	G;0;6;K;9;/;0;0;;;G;0;6;T;1;1;/;0;0;;;G;1;0;L;2;5;/;6;3查看分类表>
申请人	北京入思技术有限公司	申请人地址	北京市海淀区学清路甲18号中关村东升科技园学院园东配楼2层224室(东升地区) 变更专利地址、主体等相关变化，请及时变更，防止失效
权利人	北京入思技术有限公司	当前权利人	北京入思技术有限公司
发明人	王春雷;尉迟学彪;毛鹏轩
代理机构	暂无	代理人	暂无

摘要

本发明提供一种跨模态情感迁移方法及装置，所述方法包括：接收用户语音信号和视频图像；基于所述语音信号和视频图像分别进行用户语音情绪识别和面部表情识别；比对所述语音情绪识别结果和面部表情识别结果是否一致，如果一致则将用户语音信号和原始视频图像直接输出，否则根据所述语音情绪识别结果对所述用户视频图像进行相应的面部表情修正，并将用户语音信号和经过面部表情修正后的用户视频图像作为最终输出。本发明提出的跨模态情感迁移方法及装置，能够根据用户的语音情绪状况，对该用户的视频图像进行相应的表情修正，从而让用户的表情看上去更加生动而富有感染力，可有效提升在线视频聊天或者在线教学的趣味性和互动性。

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有引用任何外部专利数据！

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有被任何外部专利所引用！

我浏览过的专利

专利服务由北京酷爱智慧知识产权代理公司提供