窃电检测的机器学习方法
应用于窃电检测的机器学习方法的结构化分类如图4所示,分为四大范式:监督学习、无监督/半监督方法、深度学习架构及新兴前沿领域。范式选择最好理解为数据成熟度、标签可用性、监管要求及计算资源的函数,而非纯技术选择。本节分析围绕第2节建立的对抗性时间序列公式展开,根据每种范式在现实部署条件下如何估计f(·)、表征g(·)及计算异常分数A(y, M)进行评估。
这些范式的多样性并非反映方法论分歧,而是窃电检测问题本身的结构异质性。处于AMI早期部署阶段、已验证巡检标签少于500个的公用事业,其分析问题与管理成熟、高分辨率AMI网络且积累多年欺诈结果的大型公用事业存在根本不同。同样,要求完全可审计执法决定的监管机构,会使不透明的深度学习模型无论其基准性能如何均不适用。这些背景差异解释了为何文献未收敛于单一主导算法,以及为何范式选择必须被视为情境敏感的工程决策,而非寻找普适最优分类器。
值得注意的是,当代研究中范式间的界限日益模糊。结合无监督预训练与监督微调的混合架构,或将深度特征提取器嵌入集成决策框架的混合架构,现已占文献的相当大比例。这种范式边界的模糊强化了第2节引入的统一对抗性时间序列公式的价值,其为一致评估和比较每种方法的贡献与局限提供了通用分析视角。为明确此分析作用,以下各小节均以关键评估结尾,不仅罗列报告的优缺点,还评估每种范式在第2.2节公式中估计的内容、鉴于第3节的质量评估应如何权衡其证据基础,以及其结构局限对第6节开发的部署架构意味着什么。
4.1 监督学习算法
监督方法将窃电检测构建为二分类问题,将从用电历史中提取的特征向量映射为指示正常或欺诈行为的类别标签。早期研究将决策树、支持向量机(SVM)及k近邻应用于手工统计特征,包括从AMI数据中提取的月度总量、负荷率、峰均比、熵及自相关系数。尽管相较于人工巡检检测性能有所提升,但这些方法面临根本局限:极端类别不平衡导致采用标准目标训练的分类器在窃盗少数类上的召回率接近零;分布非平稳性则需要频繁、昂贵的重训练。
集成方法显著提升了鲁棒性,随机森林通过聚合大量不同决策树的预测来降低方差,在基准数据集上实现了0.91-0.94的AUC-ROC分数,同时提供特征重要性估计以增强可解释性。梯度提升算法(XGBoost、LightGBM及CatBoost)主导了近期的竞争性评估,通过顺序残差校正,在国网(SGCC)数据集上实现了0.92-0.97的AUC-ROC分数。研究表明,基于梯度提升的检测器结合领域特定特征工程显著优于单树分类器,而采用工程化用电偏差特征的CatBoost召回率超过95%。
类别不平衡是监督方法面临的主要结构挑战,可通过多种互补策略解决。合成少数类过采样技术(SMOTE)及其变体生成合成少数类样本以平衡训练分布;成本敏感训练公式根据类别频率反向加权误分类惩罚;决策阈值校准将分类器操作点移向更高召回率。研究表明,结合鲁棒重采样与堆叠集成架构可显著提升少数类召回率,而不会成比例增加假阳性。研究还提出了线性回归残差特征,用于捕捉预期用电轨迹的系统性偏差,提升对部分篡改方案的判别能力;对比用电画像通过将个体消费者与同辈基准进行比较,显著增强了对复杂欺诈模式的检测。
从第2.2节的公式视角看,监督范式的结构局限并非类别不平衡本身,而是标签来源。巡检导出的标签仅采样了历史上派遣巡检的对抗扭曲g(·),因此估计的决策边界锚定于先前检测到的欺诈模式;基准分数因此量化了针对对抗者策略空间已观测部分的性能,对于新型g(·)应视为乐观估计。第二个观察是,梯度提升的竞争优势取决于领域特定特征工程,这相当于手动编码假设的扭曲特征;若缺乏此类工程工作,其与深度架构的性能差距会扩大。实际影响是,监督方法最适合作为预筛选候选对象的高精度精炼器,而非不断演变对抗者的唯一检测器。
4.2 无监督与半监督学习
在标签极度稀缺的环境中,即早期AMI部署的主要状况,无监督与半监督方法成为实际必需。这些方法从无标签或部分标签数据中建模标称用电流形,并将偏差识别为潜在异常,无需已确认的窃电样本。
孤立森林算法构建随机划分树的集成;异常样本因稀疏性而在较少划分中被隔离,产生较短的平均路径长度作为异常分数。单类SVM在核映射特征空间中学习包含正常样本的超球体;边界外的观测值被分类为异常。基于自动编码器的检测器在正常用电档案上训练,并将重构误差超过学习阈值的观测值标记为异常。研究表明,自动编码器检测器在无需窃电标签的情况下实现了与监督分类器相当的召回率。
半监督变体通过纳入有限的标签信息(通常是已验证的正常样本)来约束学习表征,部分缓解了高假阳性率问题。研究表明,使用统计用电画像图像的半监督学习显著改善了完全无监督基线的精确率-召回率权衡。周期性增强的单类分类器显式建模正常用电的周度与季节性周期,减少了由合法行为变异驱动的假阳性。最优样本选择策略最大化了每标签样本的检测信息增益,显著降低了达到目标检测性能所需的标注预算。结合基于原型的单类学习与集成聚合已被证明可在无需多样化标签窃电训练样本的情况下实现鲁棒的零日窃电检测。
该范式的核心弱点直接源于其估计内容。由于无监督方法仅建模标称流形M,从不表征g(·),其异常分数衡量的是与历史正常状态的偏差而非窃电概率:任何合法的分布式偏移,如新增电动汽车充电桩、 occupancy变化或电价引发的行为响应,在分数层面与欺诈结构上是无法区分的。无监督输出估计的是异常概率,而公用事业的决策问题需要的是给定异常下的窃电概率,混淆二者是导致该文献中高假阳性率的根本原因。运营层面的启示是,无监督方法应仅部署为喂给下游判别的高召回率筛选器,绝不应作为执法行动的直接触发器,这种分工在第6.2节的分层架构中被形式化。
4.3 深度学习架构
4.3.1 循环网络(LSTM与GRU)
深度学习架构直接从原始用电序列中学习分层非线性时间表征,无需显式特征工程。长短期记忆(LSTM)网络采用输入门、遗忘门及输出门机制,选择性保留和丢弃跨长时间跨度的信息,有效捕捉跨度从数天到数周的用电依赖关系。门控循环单元(GRU)提供了一种计算简化的门控结构,在较低参数量下具有相当的序列建模能力,更受资源受限部署的青睐。研究表明,经过参数调优的双向LSTM结合预训练特征,通过利用分类期间的未来上下文信息,优于标准LSTM基线。
4.3.2 卷积神经网络(CNN)与混合架构
卷积神经网络(CNN)擅长通过学习的滤波器组识别用电时间序列中的局部形态异常。宽深CNN窃电检测架构通过多尺度卷积处理,在SGCC基准上比SVM基线实现了显著的准确率提升。CNN-LSTM混合架构结合了CNN的局部模式提取能力与LSTM的长程时间建模能力,已成为近期基准测试的主导范式。研究表明,CNN-LSTM在所有评估指标上均显著优于独立架构。研究报道使用CNN-BiLSTM在基准数据集上取得了超过0.95的F1分数,而结合注意力增强的残差CNN-LSTM架构以显著降低的计算开销实现了有竞争力的性能。
4.3.3 Transformer模型
适配于用电时间序列的Transformer架构通过自注意力机制建模任意时间步对之间的依赖关系,不受循环网络距离衰减限制。研究表明,CNN-Transformer混合模型在复杂多模态周度模式消费者中持续优于CNN-LSTM基线,其中选择性时间注意力提供了最大优势。研究还将卷积长短期记忆(ConvLSTM)与深度强化学习结合,通过纳入自适应决策策略,实现了针对对抗性优化隐蔽攻击模式的鲁棒检测。
4.3.4 图神经网络
基于单个电表的检测方法因无法利用地理邻近或拓扑连接消费者间的空间相关性而存在根本局限,而这些信息对于检测分布式窃电团伙、选择性线路级旁路方案及协同网络物理攻击具有高度诊断价值。图神经网络(GNN)通过将配电网表示为图G = (V, E)来解决此局限,其中节点V对应计量消费者或网络母线,边E编码物理连接性、电气邻近性或统计推导的用电相关性。消息传递操作在此图结构上传播邻域用电信号,使得每个节点的异常评估能够以其拓扑上下文的行为为条件,而非孤立计算。
图卷积网络(GCN)在图邻接结构上应用可学习的谱滤波器,有效地在拓扑上执行局部空间卷积。图注意力网络(GAT)通过学习动态注意力权重来选择性强调拓扑信息丰富的邻居,进一步提升了对不完整或噪声连接信息的鲁棒性。研究表明,基于GCN的检测显著提升了针对分布式窃电方案的检测率,优于独立处理消费者的单个电表分类器。在GNN框架内结合对比学习与非侵入式负荷监测特征,已证明能改善欺诈与正常用电特征在潜在空间中的分离,表明电器级分解可为总用电档案提供互补的判别信号。
尽管有这些优势,基于GNN的检测引入了实际部署挑战。构建准确的图表示需要可靠的网拓扑数据,而在新兴经济体的配电系统运营商(DSO)环境中,这类数据往往不完整或过期。由于网络重构、负荷切换及基础设施扩展导致的动态拓扑变化,需要持续更新图表示,这引入了可能对小型公用事业而言过高的运营开销。计算复杂度还随图规模扩展,使得在大型配电系统中以亚小时间隔进行全网络GNN推理计算量巨大。这些约束表明,GNN方法最适合作为补充精炼层,运行于由计算更轻的上游筛选方法识别的高优先级候选子集上,而非作为应用于全体消费者的第一级检测机制。
纵观整个深度学习家族,三个观察结果限定了 headline 基准结果。第一,证据基础比引用量显示的要窄:绝大多数报告结果源自单一基准(SGCC),因此深度架构的表面优越性部分反映了数据集集中而非已证明的普适性。第二,一旦应用第5.1节的协调规则,最强梯度提升配置与混合深度架构之间的差距缩小到跨研究方差范围内,这警示不应将架构深度视为检测能力的主要驱动因素。第三,由于深度模型从历史欺诈中隐式学习g(·)的表征,它们继承了与经典监督方法相同的标签来源局限,同时增加了不透明性与计算成本;其差异化价值在高质量数据使形态特征具有信息性的场景下最大,而在标签稀缺或可审计性至关重要的场景下最小。
4.4 生成模型与数据增强
已验证窃电样本的极度稀缺(通常占标签数据集的1%以下)是训练校准良好的窃电正类分类边界的根本结构障碍。两种生成建模范式被提出,通过合成少数类增强来解决此约束。
生成对抗网络在生成器网络与判别器网络之间建立对抗训练动态。生成器学习合成在统计上与已验证窃电档案无法区分的用电时间序列,而判别器学习区分合成样本与真实样本。通过迭代对抗精炼,生成器逐步提升合成窃电序列的真实性。这些输出增强了分类器训练中的少数类,使检测模型暴露于比有限已验证标签集更广泛的欺诈特征范围内。条件GAN变体可根据特定窃电模式标签调节合成过程,为生成样本的特征提供额外控制,实现对代表性不足欺诈类别的靶向增强。
变分自动编码器从概率角度处理增强问题,学习用电分布的结构化连续潜在空间表征,通过在该表征中采样并解码对应于异常行为的区域的潜在向量,可从中抽取新的合成样本。与GAN不同,VAE提供显式概率密度估计,可用于量化生成样本的合理性,为在纳入训练集前过滤不合理增强提供了原则性机制。
两种方法都需要针对真实保留窃电数据进行严格验证。文献一致警告,如果评估集包含与训练增强来自同一生成分布的合成样本,归因于合成增强的性能提升可能具有误导性,这种循环验证形式会虚增报告指标,而无法反映对真实世界欺诈模式的真正泛化能力。因此,评估协议应严格分离合成增强与评估数据,并独立报告在已验证真实窃电案例上的性能。
从统一公式的视角看,生成增强处于认识论上微妙的位置:基于GAN或仿真的窃电生成器本身就是g(·)的显式模型,因此在其输出上训练的检测器可能学习的是研究者关于欺诈的假设而非欺诈本身。这并非反对增强的论点,增强通常是实现可训练类别平衡的唯一途径,但这解释了为何第5.1节的协调规则排除了在合成增强测试集上评估的结果,以及为何增强密集型研究最好解释为测量假设窃电模式的可检测性而非预期现场性能。