内容特征一致性风格迁移网络

摘要：

针对编解码风格迁移网络在内容特征传递和跨域特征融合过程中易产生误差的问题,提出一种内容特征一致性风格迁移网络.将源域和目标域图像输入编码模块分别提取内容和风格特征;双链路特征传递模块在内容编码和解码模块间构建同级特征映射,利用特征增强和前馈参考链路并行处理内容特征;内容和风格特征在解码模块中融合并输出风格迁移结果.在多模态无监督图像转换(MUNIT)网络的基础上进行仿真测试,该网络对于低光照环境中目标模糊和目标与背景反差小的情况迁移效果提升明显.在BDD100K数据集上的实验结果表明,与MUNIT网络相比,所提网络的FID和IS指标分别平均下降3.2％和提升8.6％,能够实现图像内容一致、风格精确的图像变换,适用于无人驾驶等应用场景.

关键词：风格迁移、链路模块、前馈参考、内容特征、内容编码

所属期刊栏目：34

分类号：TP391.41(计算技术、计算机技术)

资助基金：国家自然科学基金;辽宁省自然科学基金;辽宁省自然科学基金;民族创新联合基金

在线出版日期：2022-06-29（万方平台首次上网日期，不代表论文的发表时间）

页数：共9页

页码：892-900