首:次 用自然语言解释,图神经网络

2025-07-25 11:04:57      来源:齐鲁网

【导读】GraphNarrator是Emory大学研究团队开发的首个为图神经网络生成自然语言解释的工具。通过构造和优化解释伪标签,再将这些标签蒸馏到一个端到端模型中,使模型能直接输出高质量的自然语言解释,让复杂的图神经网络决策过程变得透明可理解,且在多个真实数据集上验证了其有效性。

图神经网络(GNN)已成为处理结构化数据的核心工具,广泛应用于社交网络、药物设计、金融风控等场景。

然而,现有GNN的决策过程高度复杂,且常常缺乏透明度:为什么模型做出这样的预测?关键依据在哪?这成为阻碍其大规模落地的重要瓶颈。

已有方法多基于「重要子图提取」或「节点-边归因」,如GNNExplainer、PGExplainer等,但它们只能输出结构片段,不具备人类可读性,且缺乏对文本属性节点的处理能力(如文献图、商品图)。

Emory大学的研究团队提出了首个面向图神经网络的自然语言解释生成器GraphNarrator,首次实现从GNN输入输出中,生成高质量的自然语言解释,让图神经网络从「黑盒模型」变为「有理有据的决策体」。

GraphNarrator聚焦于一种重要的图类型Text-AttributedGraphs(TAGs),即节点特征为自然语言文本(如论文摘要、商品介绍、疾病描述等)。

论文贡献包括:

提出首个自然语言解释框架,将TAG图解释从结构层面扩展至语言层;

统一结构化与语言信息,桥接图结构推理与LLM理解能力;

开源工具链,提供高质量伪标签构造器+自监督蒸馏方法,便于迁移至任意GNN任务。

论文第一作者为Emory大学博士生BoPan,长期从事图学习与可解释人工智能方向研究。

共同第一作者为USC硕士生ZhenXiong和Emory大学博士生GuanchenWu,通讯作者为Emory计算机系副教授LiangZhao。

该研究获得ACL2025主会接收,提出首个面向图神经网络的自然语言解释生成器GraphNarrator。

让GNN开口说话

GraphNarrator总体包含三步:

1.构造解释伪标签(Pseudo-labelGeneration)

使用saliency-based解释方法提取「重要文本+关键邻居节点」,形式是每个特征(节点、边、token)的重要性。

将这些结构转化为结构化Prompt,和问题与预测一起输入GPT模型,生成可解释伪标签。

2.优化伪标签(FilteringviaExpert-DesignedCriteria)

通过两大标准筛选质量更高的伪标签:

忠实性(faithfulness):与模型预测一致,研究人员通过互信息(mutualinformation)的方式计算生成的文字解释与输入、输出之间的忠实性。

简洁性(conciseness):信息浓缩、可读性强,鼓励长度更短

GraphNarrator通过专家迭代(ExpertIteration)同时优化这两个目标,确保教师模型(teachermodel)生成高质量的解释。

3.蒸馏解释器(TrainingFinalExplainer)

将伪标签蒸馏进一个端到端模型(文章中使用LlaMA3.18B),直接输入图结构与文本,即可自动输出解释语句。

忠实、可读、用户更爱看!数据集

研究人员在多个真实世界的Text-AttributedGraph(TAG)数据集上对GraphNarrator进行了系统评估,包括:

Cora:论文引文图,节点为论文,文本为摘要

DBLP:作者合作图,文本为论文列表

PubMed:生物医学文献图

对比方法:

各主流LLM(LLaMA3.1-8B、GPT‑3.5、GPT‑4o)Zero-shot生成解释

SMV:基于GPT‑4o的saliency解释模板转换方法

GraphNarrator(基于LLaMA3.1-8B)

评估目标是检验GraphNarrator生成的自然语言解释是否忠实、准确、可读、受用户喜爱。

评测结果

研究人员通过自动方式和人工方式评测该方法生成的解释质量。

自动评测中,GraphNarrator在Simulatability上全面领先(+8‐10%),证明解释内容高度还原了GNN预测;

PMI‑10%覆盖率提升显著(平均+8.2%),表明能捕捉到最重要的token;Brevity(解释长度/输入长度)下降超13%,验证其「短小精炼」能力。

人工评测中,有计算语言学背景的评审从易读性、洞察力、结构信息、语义信息4个方向打分(1–7分制)。

结果表明各项均优于GPT‑4o、SMV,尤其在结构理解上优势明显(+33%),解释更流畅、逻辑清晰,获得真实用户的更高信任。

  除了国际航线网络的短板,乌鲁木齐也缺乏国际顶级航司入驻。国泰航空凭借座舱、餐食、服务等方面的表现,建立起国际品牌形象,常年与新加坡航空、阿联酋航空、卡塔尔航空这样的顶级航司保持同一水准。通过国泰开航,乌鲁木齐有望在国际市场引起更多关注。

责编:罕卓然编辑

美代表大骂以色列后尴尬改口

  中国煤矿文工团成立于1947年东北解放区,是国家级艺术院团中历史最悠久的单位之一。2005年,加挂了“中国安全生产艺术团”的牌子。2018年9月,转隶到文化和旅游部。

男子包上挖洞偷拍名女性裙底

  对抗旱工作作出安排部署。印发《关于做好当前抗旱工作的紧急通知》《关于切实做好抗旱播种保苗工作的紧急通知》等文件,就抗旱播种、田间管理、旱情监测、水源调度等提出要求。严格落实以气象预报为先导的应急响应联动机制,组织相关部门滚动开展旱情会商,分析研判旱情发展趋势。及时启动省级抗旱应急四级响应,14个省辖市先后启动本地区抗旱应急响应机制,全省进入抗旱应急状态。

向太给孙子孙女买

  最近两起企业补税事件引起市场关注。一是湖北枝江酒业股份有限公司被要求补税8500万元,因这笔税款被追溯至1994年,使得税务“倒查30年”成为舆论焦点。二是宁波博汇化工科技股份有限公司3月份收到当地税务要求补税5亿元的通知,最近企业宣布停产。上述两起事件,引起了一些企业人士的担忧。这些担忧包括是否存在全国性查税,不少企业担忧如果倒查多年需要补税,这对于经营困难的当下无疑是“雪上加霜”。跟多位省级、市级税务人士交流得知,目前并没有全国性查税部署。一些地方根据当地税收大数据风险提示等对个别企业查税,是日常工作,也是税务部门正常履职。毕竟税务部门主要负责税收、社会保险费和有关非税收入的征收管理,发现偷逃税、少缴税行为,理应依法制止,否则就是渎职。(第一财经)

防性侵儿歌

  钟自然严重违反党的政治纪律、组织纪律、廉洁纪律和生活纪律,构成严重职务违法并涉嫌受贿、故意泄露国家秘密犯罪,且在党的十八大后不收敛、不收手,性质严重,影响恶劣,应予严肃处理。

常州光头免票

  李鹏新严重违反党的政治纪律、组织纪律、廉洁纪律和生活纪律,构成严重职务违法并涉嫌受贿犯罪,且在党的十八大后不收敛、不收手,性质严重,影响恶劣,应予严肃处理。依据《中国共产党纪律处分条例》《中华人民共和国监察法》《中华人民共和国公职人员政务处分法》等有关规定,经中央纪委常委会会议研究并报中共中央批准,决定给予李鹏新开除党籍处分;由国家监委给予其开除公职处分;收缴其违纪违法所得;将其涉嫌犯罪问题移送检察机关依法审查起诉,所涉财物一并移送。

无畏契约多伦多大师赛

  对西北城市来说,机场的作用尤为重要。西北不沿海,也没有内河航运。依托铁路和机场打造枢纽,形成开放门户,无论对区域还是全国而言,都具有经济与战略的双重意义。/p>

以军公布伊斯法罕核设施遇袭后画面

  游盈隆表示,赖清德上任第一个月,只获不到半数台湾民众的支持,赖清德社会支持基础的流失是全面性的,不同程度的。游盈隆指出,根据相关经验证据,近一个月赖清德社会支持基础的流失主要原因至少有三:/p>

中央发布公职人员违规吃喝认定标准

  受高空低槽东移影响,16日河南省有分散性阵雨、雷阵雨,雨量分布不均,中西部局部中雨或大雨,并伴有短时强降水、雷暴大风等强对流天气。