面向结构化车险索赔的罕见事件欺诈识别:基于XGBoost与风险导向审计优先级建模的机器学习与深度学习比较研究

《Risks》:Risk-Based Audit Prioritization for Automobile Insurance Fraud: A Comparative Evaluation of Machine Learning and Deep Learning Under Class Imbalance

【字体: 大 中 小 】 时间:2026年11月07日 来源:Risks 1.8

编辑推荐:

  保险欺诈检测属于罕见事件分类(rare-event classification)问题,其中欺诈性索赔仅占已报告索赔的很小比例。尽管深度学习在欺诈分析中的应用日益受到推崇,但当可用信息为结构化、表格型且维度中等时,其附加价值仍不明确。研究人员基于一个公开汽车保

  
保险欺诈检测属于罕见事件分类(rare-event classification)问题,其中欺诈性索赔仅占已报告索赔的很小比例。尽管深度学习在欺诈分析中的应用日益受到推崇,但当可用信息为结构化、表格型且维度中等时,其附加价值仍不明确。研究人员基于一个公开汽车保险组合(共15,420笔索赔,其中923笔为已确认欺诈),在统一罕见事件框架下比较逻辑回归(logistic regression)、决策树(decision tree)、支持向量机(SVM)、孤立森林(isolation forest)、极端梯度提升(XGBoost)、自编码器(autoencoder)、变分自编码器(VAE)及VAE–XGBoost混合模型;该框架结合Boruta特征选择、合成少数类过采样技术(SMOTE)与随机欠采样(random undersampling)。研究植根于最优索赔审计(optimal claim auditing)的精算理论,将欺诈检测构建为风险导向审计优先级(risk-based audit prioritization)问题,通过患病率校准阈值(prevalence-calibrated threshold)将风险评分转化为调查决策,并采用受试者工作特征曲线下面积(ROC-AUC)、精确率–召回率曲线下面积(PR-AUC)及其提升度(lift)、召回率(recall)、特异度(specificity)、误分类计数及95%置信区间(CI)进行评估。基于重构的深度学习模型排序接近随机水平(ROC-AUC 0.52–0.54),表明欺诈索赔并非简单重构异常;混合模型虽提升召回率,但假阳性成本显著增加。XGBoost配合Boruta特征选择总体表现最优(ROC-AUC 0.926,95% CI 0.904–0.947;PR-AUC 0.559,95% CI 0.500–0.617;recall 0.830),其对各对照模型族的ROC-AUC优势均具统计显著性(p < 0.001);重复交叉验证与1996年时序外推测试进一步验证该排序稳定性。结果表明:对于结构化索赔数据,具备严谨特征选择的梯度提升方法优于本研究中所评估的重构型与VAE混合架构。鉴于数据来自1994–1996年公开基准,结论指向模型族相对性能,而非当前欺诈水平。
研究背景与问题提出
在汽车保险业务中,欺诈行为会扭曲精算风险过程,影响赔付率、保费充足性与资本配置,并通过互济机制将不正当成本转嫁给诚实投保人。从精算理论看,欺诈可视为索赔成本分布中的不可保成分,保险人面对的是一类带有核查成本的审计决策问题:需在审计支出与追回收益之间寻求最优权衡。现有文献虽已从规则系统转向机器学习,但在结构化、表格型、严重类别不平衡的索赔场景下,深度学习是否相较传统监督学习具有实质增益仍缺乏统一框架下的证据。多数研究仅以准确率或ROC-AUC评价,忽视罕见事件下精确率–召回率特征与审计容量约束,且较少将分类阈值解释为审计成本与期望追回收益之比。
研究人员以公开车辆保险欺诈数据集(基于carclaims基准,含15,420笔索赔、923笔欺诈标签,欺诈患病率约6.0%)为对象,构建统一实验设计,比较经典机器学习、无监督异常检测、重构型深度学习及VAE–XGBoost混合模型,并将模型输出嵌入风险导向审计优先级框架,回答“欺诈是全局异常还是监督型交互模式”这一核心问题。
主要关键技术方法
研究人员采用Kaggle车辆保险欺诈公开队列(源自Angoss Knowledge Seeker的carclaims,事故年份1994–1996),按分层70/30划分训练与独立测试集;预处理中对类别变量做序数/独热编码、连续变量做min–max归一化;以Boruta算法确认16个核心预测变量;训练侧仅对训练集施加三类不平衡处理——原始不平衡、随机欠采样、SMOTE;评估侧保持原患病率。模型涵盖逻辑回归、CART决策树、SVM、孤立森林、XGBoost,以及自编码器、VAE、VAE–XGBoost混合;以患病率(π_fraud≈0.0599)作为决策阈值,主要指标为ROC-AUC、PR-AUC与lift、recall、specificity、混淆计数,并以Hanley–McNeil区间、DeLong式差异检验、重复分层交叉验证与1994–1995训练/1996时序外推做稳健性推断。
研究结果
4.1 机器学习欺诈检测模型
研究人员在48个配置上比较经典模型。XGBoost(Boruta变量、无重采样)取得ROC-AUC 0.9259、PR-AUC 0.5594(约为无技能基线0.0599的9.3倍),最高风险十分位覆盖66.1%欺诈、前三十分位覆盖93.1%。决策树与逻辑回归居第二梯队;SVM与孤立森林接近随机。Boruta在几乎不损失排序性能下将特征压缩约一半;对XGBoost而言,SMOTE未改善排序,欠采样反而下降。
4.2 深度学习与重构型欺诈模型
自编码器与VAE以重构误差(reconstruction error)为异常分数,量化规则下ROC-AUC仅0.52–0.54,召回接近随机,说明欺诈索赔可被正常重构,并非简单流形外异常。VAE–XGBoost混合优于纯重构模型但明显弱于直接XGBoost(最佳ROC-AUC 0.7161),且潜变量压缩损失了类别交互信号;SMOTE扩大标记面却带来大量假阳性。
4.3 机器学习与深度学习模型比较评估
各模型族最优配置对比显示,直接XGBoost(Boruta)全面占优;混合模型仅具补充价值。隔离森林、自编码器、VAE均不支持“欺诈=离群点”假设,而支持“欺诈=常见属性中的监督型不利组合”。阈值可解释为隐含审计收益/成本比(B/c_A≈16.7)。
4.4 稳健性:置信区间、重复交叉验证与时序验证
25次重复交叉验证中XGBoost–Boruta均值ROC-AUC 0.938、PR-AUC 0.601,且在全部折中居首;1996年外推测试ROC-AUC 0.925、PR-AUC 0.461,仍领先所有对照。ROC-AUC差异检验中XGBoost显著优于其余模型族(p < 0.001)。
讨论与结论翻译
讨论指出,重采样可移动操作点但未必提升排序质量;部署应以风险评分为排序引擎,阈值依审计容量、误报成本与漏检损失设定。局限包括数据年代较早、仅结构化字段、未测TabNet/FT-Transformer等表格深度架构。
结论部分翻译:在所选结构化、高不平衡车险组合中,基于Boruta特征选择的XGBoost提供最具预测力与可操作性的筛查方案;欺诈更易被建模为监督判别问题而非无监督重构异常。深度学习仅在引入文本、图像、关系网络等丰富信号时才可能显现优势。模型应辅助人工审计优先级,而非自动拒赔决策。
论文核心贡献已经明确,接下来可以选择一个方向继续深化:
相关新闻
生物通微信公众号
微信
新浪微博

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号