
-
生物通官微
陪你抓住生命科技
跳动的脉搏
Transformer架构组件对微带天线反射系数预测代理模型性能的系统消融评估
《Scientific Reports》:Systematic evaluation of attention based transformer components for parametric modeling of antenna design
【字体: 大 中 小 】 时间:2026年09月18日 来源:Scientific Reports 4.9
编辑推荐:
摘要本文系统地评估了基于注意力的Transformer架构中各个组件如何影响用于预测参数化微带天线反射系数(\(S_{11}\))的数据驱动代理模型的性能。所研究的天线是一种柔性微带贴片天线,制造于聚酰亚胺衬底(介电常数 = 3.5)上,配有铜辐射贴片,总体尺寸为 \(36\
本文系统地评估了基于注意力的Transformer架构中各个组件如何影响用于预测参数化微带天线反射系数(\(S_{11}\))的数据驱动代理模型的性能。所研究的天线是一种柔性微带贴片天线,制造于聚酰亚胺衬底(介电常数 = 3.5)上,配有铜辐射贴片,总体尺寸为 \(36\,\textrm{mm} \times 36\,\textrm{mm} \times 0.1\,\textrm{mm}\),由四个设计变量进行参数化:\(L_{P1}\)、\(W_{P2}\)、\(L_{G3}\) 和 \(W_{G1}\)。通过在 Ansys HFSS(高频结构模拟器)中对 17 种不同的天线几何构型进行仿真,在 \(1\,\textrm{GHz}\) 至 \(8\,\textrm{GHz}\) 的频率范围内以 \(0.4\,\textrm{GHz}\) 的均匀步进进行采样,生成了包含 306 组几何构型及频率观测值的数据集,每种几何构型对应 18 个频率采样点。模型的输入是由四个几何参数和运行频率构成的五元连续向量,输出为以分贝为单位的相应反射系数 \(S_{11}\)。受控消融实验考察了注意力机制、归一化方案、优化器和激活函数对回归性能的影响。具体而言,标准多头注意力与线性注意力进行了比较;LayerNorm、RMSNorm 和 QKNorm 作为归一化选项进行了比较;ReLU、GELU 和 SwiGLU 作为激活函数进行了比较。训练采用 Adam 和 AdamW 优化器进行,按照固定的 70/15/15 几何构型级别进行训练/验证/测试划分,使用分组洗牌划分并以固定随机种子实现,确保任何测试几何构型的所有频率采样点均被排除在训练集和验证集之外,从而防止信息泄露。代理模型预测结果与 HFSS 仿真结果进行了验证,并与通过矢量网络分析仪获取的实测天线的 \(S_{11}\) 和增益数据进行了对比验证,确认了所提方法的实用价值。因此,本研究为在建模任务中选择 Transformer 组件提供了实证设计指南。