增强现实眼镜辅助的线缆连接器装配状态智能检错方法

TP274; 为替代航空航天产品装配过程中人工判定线缆连接器组装结果的操作,提出一种增强现实(AR)眼镜辅助的线缆连接器装配状态智能检错方法.该智能检错方法包括自动检测连接器孔位、分布排序和可视化不匹配孔位三个环节.面向孔位检测,融合了特征金字塔网络架构与双向长短期记忆网络结构的孔位检测网络可以有效定位图像中孔位位置并识别其真实安装状态;在孔位分布排序流程中,对检测到的孔位进行聚类划分至不同圆环上,排序每层圆环上孔位的极角以获得编号;顺序遍历所有编号的孔位,比对每个孔位的理想安装结果和真实安装状态可得知错装导线孔位与漏装导线的孔位,并使用AR眼镜可视化型谱图高亮这些不匹配孔位.采用PASCAL...

Full description

Saved in:
Bibliographic Details
Published in计算机集成制造系统 Vol. 27; no. 10; pp. 2822 - 2836
Main Authors 李树飞, 郑联语, 刘新玉, 王天睿
Format Journal Article
LanguageChinese
Published 北京航空航天大学 机械工程及自动化学院,北京 100191 01.10.2021
Subjects
增强现实眼镜;辅助装配;深度学习;线缆连接器;孔位检测;孔位排序
Online AccessGet full text
ISSN1006-5911
DOI10.13196/j.cims.2021.10.007

Cover

More Information
Summary:TP274; 为替代航空航天产品装配过程中人工判定线缆连接器组装结果的操作,提出一种增强现实(AR)眼镜辅助的线缆连接器装配状态智能检错方法.该智能检错方法包括自动检测连接器孔位、分布排序和可视化不匹配孔位三个环节.面向孔位检测,融合了特征金字塔网络架构与双向长短期记忆网络结构的孔位检测网络可以有效定位图像中孔位位置并识别其真实安装状态;在孔位分布排序流程中,对检测到的孔位进行聚类划分至不同圆环上,排序每层圆环上孔位的极角以获得编号;顺序遍历所有编号的孔位,比对每个孔位的理想安装结果和真实安装状态可得知错装导线孔位与漏装导线的孔位,并使用AR眼镜可视化型谱图高亮这些不匹配孔位.采用PASCAL VOC数据集的评价指标,以11种连接器的检错结果为例进行验证,提出的孔位检测网络的平均精度均值高达99.00％;同时孔位分布排序算法针对图像形变情况有较强的鲁棒性.
ISSN:1006-5911
DOI:10.13196/j.cims.2021.10.007