基于字形感知和注意力归一化的字体迁移

摘要：

字体迁移是一项十分具有挑战性的任务,其目的是将目标字体通过某种映射方式迁移到源字体,以实现字体的变换.现有的方法在字体迁移方面的鲁棒性有限,突出表现为对生成字体结构完整性的保持较差,尤其是当两种不同种类的字体差别较大时.针对这些问题,提出了一种端到端的字体迁移网络框架模型.该模型引入了注意力归一化以更好地提取字形图像的高级语义特征,从而提高生成图像的质量.此外,使用自适应实例归一化进行字体特征和内容特征融合,以实现字体的转换.在保持字形结构完整性方面,设计了感知损失和上下文损失来约束字形结构的生成.为了稳定GAN网络的训练,在对抗损失函数的设计中加入了正则化项.为了验证该模型的有效性,实验采用FET-GAN中公开的数据集进行了多组训练和测试,并与FET-GAN,CycleGAN和StarGANv2进行了对比.实验结果表明,该模型能够在给定的多个字体域之间实现相互的字体迁移,并且其迁移的效果和模型泛化能力与其他工作相比均具有一定的优势.

关键词：字体迁移、自适应实例归一化、注意力归一化、上下文损失、感知损失

所属期刊栏目：50

分类号：TP391(计算技术、计算机技术)

在线出版日期：2023-09-06（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：398-403