内容结构保持的图像风格迁移方法

TP391; 现有的风格迁移算法大多是实现艺术作品到真实场景,如照片等的转换任务.在这种任务设定下,图像内容的边界等结构信息可能会出现一定程度的变化,然而这种变化不利于下游任务的完成,因而不适用于大部分工业场景.为此提出一种新的结构保持的风格迁移方法,该方法分为频域约束的图像生成模块和基于memory bank机制的语义匹配模块.前者用以保证转换前后图像的整体语义结构一致性,而后者保证了图像的语义与风格匹配,从而物体内部结构一致.为了验证该方法在工业场景中的迁移效果,采用光伏板数据集,在虚拟到真实的迁移方向上,所提出的风格迁移算法能在完成风格转换的同时较好地解决图像结构形变问题,进而满足后续任...

Full description

Saved in:
Bibliographic Details
Published in计算机工程与应用 Vol. 59; no. 6; pp. 146 - 154
Main Authors 王小明, 毛语实, 徐斌, 王子磊
Format Journal Article
LanguageChinese
Published 国网安徽省电力有限公司 电力科学研究院,合肥 230601%中国科学技术大学 先进技术研究院,合肥 230000 15.03.2023
Subjects
计算机视觉
图像风格迁移
生成对抗网络
Online AccessGet full text
ISSN1002-8331
DOI10.3778/j.issn.1002-8331.2110-0107

Cover

More Information
Summary:TP391; 现有的风格迁移算法大多是实现艺术作品到真实场景,如照片等的转换任务.在这种任务设定下,图像内容的边界等结构信息可能会出现一定程度的变化,然而这种变化不利于下游任务的完成,因而不适用于大部分工业场景.为此提出一种新的结构保持的风格迁移方法,该方法分为频域约束的图像生成模块和基于memory bank机制的语义匹配模块.前者用以保证转换前后图像的整体语义结构一致性,而后者保证了图像的语义与风格匹配,从而物体内部结构一致.为了验证该方法在工业场景中的迁移效果,采用光伏板数据集,在虚拟到真实的迁移方向上,所提出的风格迁移算法能在完成风格转换的同时较好地解决图像结构形变问题,进而满足后续任务的需求.
ISSN:1002-8331
DOI:10.3778/j.issn.1002-8331.2110-0107