
-
生物通官微
陪你抓住生命科技
跳动的脉搏
基于立方与立方根网络及形变约束的任意风格迁移方法研究
【字体: 大 中 小 】 时间:2025年08月22日 来源:Pattern Recognition 7.6
编辑推荐:
本文提出了一种创新的任意风格迁移模型CCRNet,通过立方-立方根运算原理融合全局风格化(AdaIN)与细节风格化(SANet)模块,并引入形变约束损失(warping constraint)增强模型对内容结构的保持能力。实验表明,该模型在平衡内容保真度(content preservation)与风格表现力(style representation)上显著优于现有方法(如SCT、MCCNet),代码已开源。
Highlight
本文亮点在于:1)受数值立方-立方根恒等变换启发,设计CCRNet模块,通过三重融合(全局/局部/通道相关)实现内容与风格的深度平衡;2)首创形变约束损失(warping loss),通过水平/垂直翻转等扰动增强模型鲁棒性,使风格化结果不受输入形变影响。
Model Overview
模型采用编码器-解码器架构:预训练VGG-19(ReLU4-1层提取内容特征,ReLU1-5层提取风格特征)作为编码器,CCRNet为核心融合模块。形变约束通过计算翻转图像的风格损失(style loss)、内容损失(content loss)和均方误差(MSE loss)实现,迫使模型忽略几何扰动。
Experimental Setups
训练数据:MS-COCO(内容)和WiKiArt(风格)各8万张图像,256×256随机裁剪。超参数:Adam优化器(lr=0.0001),损失权重λc=2.0、λs=4.0、λidt1=50.0、λidt2=1.0。
Conclusion
CCRNet通过数学启发的特征重组机制,解决了传统方法中全局风格化(内容失真)与局部风格化(风格不足)的矛盾。形变约束进一步提升了模型对图像本质特征的理解,为艺术生成和医学图像处理(如多模态融合)提供新思路。
生物通微信公众号
知名企业招聘