GLARE:用自然语言查询视觉模型全局解释的新界面

arXiv·31 天前

全局解释对于理解视觉模型在不同数据集、类别和决策场景下的行为至关重要,但其复杂且整体化的特性往往阻碍实际探索。由于用户通常希望针对具体问题获得有针对性的答案,而非静态的分析结果,研究团队提出了一种基于大语言模型的交互界面GLARE,为黑盒图像分类器提供自然语言访问全局解释的能力。该系统的核心大语言模型充当中间媒介,将自然语言问题转化为对局部解释数据的结构化SQL查询,从而在不暴露底层技术细节的情况下实现灵活的数据聚合。针对每个查询,界面会输出经过统计增强的自然语言回复,同时支持局部解释和符合查询意图的可视化展示。研究团队从意图理解准确性、查询映射精度、对新查询和数据集的泛化能力,以及对语言错误的鲁棒性等多个维度对系统进行了评估。结果表明,基于大语言模型的查询方式显著提升了以人为中心的可解释AI中全局解释的可访问性和实用性。

可解释AI自然语言界面视觉模型大语言模型人机交互

原文来源:https://arxiv.org/abs/2606.19735

相关阅读

AI_LectureNote:英语医学术语还原与语义保真度研究
大模型生成文本的“文学无风格”现象
大语言模型中的问题顺序效应:QQ等式审计揭示机制特性与饱和陷阱
首个吉尔吉斯语大模型基准发布:揭示低资源语言评估挑战
Scope3Trace:基于证据的Scope 3温室气体排放识别与提取框架

← 返回