基于立方与立方根网络及形变约束的任意风格迁移方法研究

【字体: 时间:2025年08月22日 来源:Pattern Recognition 7.6

编辑推荐:

  本文提出了一种创新的任意风格迁移模型CCRNet,通过立方-立方根运算原理融合全局风格化(AdaIN)与细节风格化(SANet)模块,并引入形变约束损失(warping constraint)增强模型对内容结构的保持能力。实验表明,该模型在平衡内容保真度(content preservation)与风格表现力(style representation)上显著优于现有方法(如SCT、MCCNet),代码已开源。

  

Highlight

本文亮点在于:1)受数值立方-立方根恒等变换启发,设计CCRNet模块,通过三重融合(全局/局部/通道相关)实现内容与风格的深度平衡;2)首创形变约束损失(warping loss),通过水平/垂直翻转等扰动增强模型鲁棒性,使风格化结果不受输入形变影响。

Model Overview

模型采用编码器-解码器架构:预训练VGG-19(ReLU4-1层提取内容特征,ReLU1-5层提取风格特征)作为编码器,CCRNet为核心融合模块。形变约束通过计算翻转图像的风格损失(style loss)、内容损失(content loss)和均方误差(MSE loss)实现,迫使模型忽略几何扰动。

Experimental Setups

训练数据:MS-COCO(内容)和WiKiArt(风格)各8万张图像,256×256随机裁剪。超参数:Adam优化器(lr=0.0001),损失权重λc=2.0、λs=4.0、λidt1=50.0、λidt2=1.0。

Conclusion

CCRNet通过数学启发的特征重组机制,解决了传统方法中全局风格化(内容失真)与局部风格化(风格不足)的矛盾。形变约束进一步提升了模型对图像本质特征的理解,为艺术生成和医学图像处理(如多模态融合)提供新思路。

相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普
  • 急聘职位
  • 高薪职位

知名企业招聘

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号