一种用于说话人无关的唇语识别方法及系统

发明专利有效专利

申请号：
CN202110226432.4
IPC分类号：G06K9/00;G06N3/04;G06N3/08
申请日期：
2021-03-01
申请人：
西安邮电大学

基础信息

权利要求

说明书

PDF全文

法律信息

引证文献

著录项信息

专利名称	一种用于说话人无关的唇语识别方法及系统
申请号	CN202110226432.4	申请日期	2021-03-01
法律状态	实质审查	申报国家	中国
公开/公告日	2021-06-11	公开/公告号	CN112949481A
优先权	暂无	优先权号	暂无
主分类号	G06K9/00 ? IPC结构图谱： G 物理 G0 仪器 G06 计算；推算；计数 G06K 数据识别；数据表示；记录载体；记录载体的处理（印刷本身入B41J） G06K9/00 用于阅读或识别印刷或书写字符或者用于识别图形，例如，指纹的方法或装置（用于图表阅读或者将诸如力或现状态的机械参量的图形转换为电信号的方法或装置入G06K 11/00；语音识别入G10L 15/00）〔1，7〕	IPC分类号	G;0;6;K;9;/;0;0;;;G;0;6;N;3;/;0;4;;;G;0;6;N;3;/;0;8查看分类表>
申请人	西安邮电大学	申请人地址	陕西省西安市长安街618号变更专利地址、主体等相关变化，请及时变更，防止失效
权利人	西安邮电大学	当前权利人	西安邮电大学
发明人	路龙宾;宁都;金小敏;滑文强;孙涛
代理机构	北京高沃律师事务所	代理人	刘凤玲

摘要

本发明涉及一种用于说话人无关的唇语识别方法及系统，所述方法包括：获取训练唇语图片序列；将训练唇语图片序列输入身份与语义深度耦合模型中，得到特征序列并计算各个网络的损失；以各种加权损失作为优化目标，对耦合模型和唇语预测网络进行迭代寻优，得到最优识别模型；将待测图片序列输入识别模型中，得到识别文本。本发明分别对唇语图片序列的身份特征与语义特征编码，以不同样本身份对比损失以及相同样本不同帧的身份差异损失对身份编码过程进行约束，以监督损失对语义编码过程进行约束，并采用身份与语义耦合重建网络对学习的身份与语义特征进行约束，有效的避免语义特征混入身份信息，提高了唇语识别模型在说话人无关条件下的识别准确率。

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有引用任何外部专利数据！

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有被任何外部专利所引用！

我浏览过的专利

专利服务由北京酷爱智慧知识产权代理公司提供