一种基于深度卷积和注意力机制的唇语识别方法-购物商城-保定市知识产权运营与公共信息服务平台

客服热线：19932581850

免费查询

一站式服务

首页政策法规知产运营专利转化会员信息地理标志第三方服务一网通办信息服务

一种基于深度卷积和注意力机制的唇语识别方法

我有意向

次浏览

详细信息
成果简介
成果亮点
前景分析

成果名称：	一种基于深度卷积和注意力机制的唇语识别方法	关键字：	卷积 , 注意力 , 识别 , 置信度 , 唇部 , 机制 , 置信 , 类别 , 注意 , 提取	应用行业：	计算机、通信和其他电子设备制造业
高新技术领域：	电子信息技术	所在地：	河北省	知识产权类型：	发明专利
知识产权编号：	CN202110801803.7	成果体现形式：		成果属性：
成果所处阶段：	授权	成果水平：	国内领先	研究形式：
学科分类：		战略新兴产业：	新一代信息技术	课题来源：
第一完成单位名称：	北华航天工业学院	第一完成单位属性：		技术成熟度：
合作方式：	专利许可	交易价格(万)：	3.00	所属十强产业：

本发明公开了一种基于深度卷积和注意力机制的唇语识别方法，包括步骤：S1)对大型唇读数据集进行预处理，获取唇部识别图像；S2)将唇部识别图像批量输入到3D卷积网络模型，进行时空特征提取；S3)将唇部识别图像提取的时空特征输入卷积和注意力机制的混合网络模型，进行局部和全局的空间特征提取；S4)将提取的空间特征输入到双向门控循环单元，进行长短期特征序列提取；S5)将提取的长短期特征序列输入到多层感知机，获取各个类别的置信度分数；S6)基于各个类别的置信度分数，经过带有标签平滑机制的交叉熵损失函数输出识别概率值。本发明在卷积网络的基础上加入注意力机制模型，并改善其结构，提高了唇语识别率并减小了计算开支。