基于人脸姿态估计的多角度虚拟眼镜试戴技术

TP391; 虚拟眼镜试戴手动操作占比高、试戴角度单一、试戴效果失真,所以试戴技术商用率较低.针对这些问题,文中提出了一种基于人脸特征检测与头部空间姿态估计相结合的虚拟试戴技术,并实现了一套虚拟眼镜试戴系统.通过摄像头采集头部实时视频,并按帧分析,采用ERT级联回归定位面部特征点.根据面部特征点位置信息和头部旋转信息将透视变换后的眼镜图像准确融合到对应角度的人脸图像中.在AFLW人脸数据库上对三维实时姿态估计进行了量化评估,±60°内角度误差约为8.8°.结果表明,该算法精度高且速度快,在角度变化频繁、外界光线强弱变化大、背景干扰物较多的复杂情况下仍能快速准确地实现三维多角度虚拟试戴,效果逼真...

Full description

Saved in:
Bibliographic Details
Published in电子科技 Vol. 34; no. 9; pp. 58 - 65
Main Authors 刘轩, 付东翔
Format Journal Article
LanguageChinese
Published 上海理工大学 光电信息与计算机工程学院,上海200093 2021
Subjects
三维空间
头部实时姿态估计
ERT
动态定位
透视变换
图像合成
多角度虚拟试戴
欧拉角
人脸特征点定位
Online AccessGet full text
ISSN1007-7820
DOI10.16180/j.cnki.issn1007-7820.2021.09.011

Cover

More Information
Summary:TP391; 虚拟眼镜试戴手动操作占比高、试戴角度单一、试戴效果失真,所以试戴技术商用率较低.针对这些问题,文中提出了一种基于人脸特征检测与头部空间姿态估计相结合的虚拟试戴技术,并实现了一套虚拟眼镜试戴系统.通过摄像头采集头部实时视频,并按帧分析,采用ERT级联回归定位面部特征点.根据面部特征点位置信息和头部旋转信息将透视变换后的眼镜图像准确融合到对应角度的人脸图像中.在AFLW人脸数据库上对三维实时姿态估计进行了量化评估,±60°内角度误差约为8.8°.结果表明,该算法精度高且速度快,在角度变化频繁、外界光线强弱变化大、背景干扰物较多的复杂情况下仍能快速准确地实现三维多角度虚拟试戴,效果逼真自然,基本满足虚拟试戴技术的要求.
ISSN:1007-7820
DOI:10.16180/j.cnki.issn1007-7820.2021.09.011