面向手语识别的视频关键帧提取和优化算法

TP391; 基于计算机视觉的手语识别技术可以为聋校的双语教学带来很大的便利,而手语识别技术的难点之一在于视频关键帧的提取.根据手语视频关键帧的特点和手语者的手语习惯,提出了一种面向手语识别的视频关键帧提取和优化算法.首先利用卷积自编码器提取视频帧的深度特征,对其进行K-means聚类,在每类视频帧中采用清晰度筛选取出最清晰的视频帧作为初次提取的关键帧;然后利用点密度方法对初次提取的关键帧进行二次优化,得到最终提取的关键帧进行手语识别.实验结果表明,本文算法能大量消除冗余帧,并能提高手语识别的准确率和效率....

Full description

Saved in:
Bibliographic Details
Published in华东理工大学学报（自然科学版） Vol. 47; no. 1; pp. 81 - 88
Main Authors 周舟, 韩芳, 王直杰
Format Journal Article
LanguageChinese
Published 东华大学信息科学与技术学院,上海 201620 28.02.2021
Subjects
K-means
卷积自编码器
视频关键帧
手语识别
点密度
Online AccessGet full text
ISSN1006-3080
DOI10.14135/j.cnki.1006-3080.20191201002

Cover

More Information
Summary:TP391; 基于计算机视觉的手语识别技术可以为聋校的双语教学带来很大的便利,而手语识别技术的难点之一在于视频关键帧的提取.根据手语视频关键帧的特点和手语者的手语习惯,提出了一种面向手语识别的视频关键帧提取和优化算法.首先利用卷积自编码器提取视频帧的深度特征,对其进行K-means聚类,在每类视频帧中采用清晰度筛选取出最清晰的视频帧作为初次提取的关键帧;然后利用点密度方法对初次提取的关键帧进行二次优化,得到最终提取的关键帧进行手语识别.实验结果表明,本文算法能大量消除冗余帧,并能提高手语识别的准确率和效率.
ISSN:1006-3080
DOI:10.14135/j.cnki.1006-3080.20191201002