成果名称：	一种基于深度卷积和注意力机制的唇语识别方法	关键字：		应用行业：
高新技术领域：		所在地：		知识产权类型：	发明专利
知识产权编号：	ZL202110801803	成果体现形式：		成果属性：
成果所处阶段：		成果水平：	国内先进	研究形式：
学科分类：		战略新兴产业：		课题来源：
第一完成单位名称：	北华航天工业学院	第一完成单位属性：		技术成熟度：
合作方式：		交易价格(万)：	2.00	所属十强产业：

本发明公开了一种基于深度卷积和注意力机制的唇语识别方法，包括步骤：S1)对大型唇读数据集进行预处理，获取唇部识别图像；S2)将唇部识别图像批量输入到3D卷积网络模型，进行时空特征提取；S3)将唇部识别图像提取的时空特征输入卷积和注意力机制的混合网络模型，进行局部和全局的空间特征提取；S4)将提取的空间特征输入到双向门控循环单元，进行长短期特征序列提取；S5)将提取的长短期特征序列输入到多层感知机，获取各个类别的置信度分数；S6)基于各个类别的置信度分数，经过带有标签平滑机制的交叉熵损失函数输出识别概率值。本发明在卷积网络的基础上加入注意力机制模型，并改善其结构，提高了唇语识别率并减小了计算开支。