TIAgent 用自然语言生成可验证的计算病理学工作流,并评测 14 个 LLM。
资讯摘要
论文提出 TIAgent,一个计算病理学(CPath)工作流自动生成框架:给定自然语言任务描述和输入数据集,自动构建可检查、可执行的计算图,复用现有 CPath 操作,用于生物标志物发现与组织分析。作者在 18 类操作、90 个单元任务上系统评测 14 个骨干 LLM,以 Unit Workflow Success(UWS)衡量完整正确生成单元工作流的能力,Kimi-K2.7-Code 取得最高 UWS 0.967(95% CI: 0.907-0.989)。分析还指出,选对计算操作与正确配置参数是两类不同挑战。
要点速读
- TIAgent 将自然语言提示与输入数据集转换为可检查、可执行的计算图,复用已有 CPath 操作。
- 作者在 18 种 CPath 操作类型的 90 个单元任务上评测 14 个骨干 LLM,以 UWS 量化完整正确的工作流生成能力。
- Kimi-K2.7-Code 的 UWS 最高,为 0.967(95% CI: 0.907-0.989);节点与参数正确性分析显示选操作和配参数是不同难点。
中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/10/28 08:00:17(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。