Volume 2,Issue 9
基于因果推断在消除自然语言处理(NLP)模型偏差中的研究进展
近年来,随着自然语言处理(NLP)技术的迅猛发展,大规模预训练模型在诸多实际场景中取得了显著成就,但与此同时,其内在偏差问题也日益凸显,严重影响了模型在公平性、鲁棒性以及社会伦理等方面的应用。传统的偏差消除方法主要依靠数据增广、微调及人工标注等手段,虽然在一定程度上缓解了偏差问题,但往往难以从根本上消除模型所固有的系统性偏见,且在处理复杂语义和跨领域任务时存在适用性不足。本文聚焦于因果推断在NLP模型偏差消除中的应用,系统梳理了基于因果干预和反事实推理的最新研究成果。
[1] 陈 乾,冯福利,温立杰,马春平,谢鹏军.基于反事实推理的文本分类去偏.载于《第59届计算语言学协会年会暨第11届国际自然语言处理联合会议论文集(卷1:长篇论文)》第5434-5445页.2021.
[2] 吴嘉龙 ,张林海,周德宇,许国强.DINER:基于多变量因果推理的方面级情感分析去偏.载于《计算语言学协会年会论文集:ACL2024》3504-3518页.2024.
[3] 王旭 , 张海南,赵帅,陈洪申,丁卓烨,万志国,程博,蓝雁燕.基于因果推理的多轮对话推理中的反事实语境去偏.IEEE/ACM音频、语音与语言处理期刊.2023.
[4] 陈子伟 ,胡林梅,李威新,邵颖霞,聂立强.基于因果干预和反事实推理的多模态假新闻检测.载于《第61届计算语言学协会年会论文集(卷1:长篇论文)》第627-638页.2023.
[5] 孙圣杰 ,马廷淮,黄凯.融合干预与反事实的知识感知型去偏推理模型[J].《计算机科学与技术前沿》18(12).2024年.
[6] 朱迪亚·珀尔.《因果关系:模型、推理与推断(第二版)》.剑桥大学出版社,美国.2009.
[7] 虞燕波,支德源.PCSK9抑制剂的应用与消化道肿瘤之间的因果关系:一项药物靶向孟德尔随机化研究[J].临床和实验医学杂志,2024,23(22):2353-2356.
[8] 宋春雨.客观归责理论视角下重大责任事故罪因果关系的判断[J].中国检察官,2024,(22):26-30.
[9] 孙丽华,王文静,朱宏涛,等.基于故障相关变量因果关系分析的工业过程故障根因诊断[J].化工自动化及仪表,2024,51(06):1035-1044.
[10] 伍杨,李甜,王顺娜,等.两样本孟德尔随机化分析幽门螺杆菌感染与慢性乙型肝炎的因果关系[J].胃肠病学和肝病学杂志,2024,33(11):1475-1480.