Hugging Face Blog·· 1 天前精选AI 评分67
Ai2 发布 Old Ideas, Novel Problems 研究与基准:LLM 评审科研想法新颖性并不可靠
Can we trust LLMs to judge whether a research idea is novel?
AI 导读
Ai2 发布 Old Ideas, Novel Problems 研究,附带新颖性评审基准、数据和代码,用 ICLR 2026 审稿意见构建 154 条高新颖与 145 条低新颖人类想法池。
推荐理由
Ai2 自建基准实测六个 LLM 新颖性评审,用数据说明提示词微小改动会大幅改变判断,对自动化科研评测有直接参考意义。
来源:Hugging Face Blog · huggingface.co