AI助手撰写科研影响力摘要:真实场景验证效率提升90%

arXiv·9 小时前

在临床与转化科学奖(CTSA)项目中,工作人员通常需要花费约15小时手动整理每位学者的研究影响力记录,这种方法难以扩展到整个研究团队。为解决这一效率瓶颈,研究团队构建了一个人机协同AI助手系统。该系统能够自动从多平台、跨学科收集学者数据,整理证据档案,并草拟单句的转化科学效益模型(TSBM)影响力摘要供工作人员审核。

研究团队在一个CTSA中心的实际工作流程中对该系统进行了评估,涉及10位职业发展学者。两名评估人员独立审查了AI生成的507条发现,将其标记为“接受”、“编辑”或“拒绝”。结果显示,81.7%的AI生成内容被两位评审同时接受或仅需编辑即可使用。每位评审处理单名学者材料的中位时间仅为14分钟,相比原先15小时的手工整理时间,效率提升超过90%。

系统表现评估显示:评审间一致性达到中等水平(Cohen's kappa 0.43);检索召回率接近人工搜索水平;生成的影响力证据覆盖了TSBM所有四个领域;约三分之一发现属于常规流程容易忽略的非学术类别。评审对合成准确性的评分为4.5分(5分制),实用性评分达4.8分。

这项研究表明,人机协同AI助手可作为学者影响力记录的“初稿作者”,将工作人员从收集和撰写工作中解放出来,专注于审核工作,使大规模团队的影响力报告成为可能。

AI助手科研效率人机协同学术评估自然语言处理

原文来源:https://arxiv.org/abs/2607.16989

相关阅读

AI_LectureNote:英语医学术语还原与语义保真度研究
大模型生成文本的“文学无风格”现象
大语言模型中的问题顺序效应:QQ等式审计揭示机制特性与饱和陷阱
首个吉尔吉斯语大模型基准发布:揭示低资源语言评估挑战
Scope3Trace:基于证据的Scope 3温室气体排放识别与提取框架

← 返回