Agents4Science会议被构想为一个用AI生成和评估科学的“沙盒”。图片来源:Charles Taylor/iStock
本报讯 这将是计算机科学领域首次出现的景象:一次科学会议的所有论文和评论都是由机器生成的。这场名为“Agents4Science 2025”的活动将于10月22日在线举行,参会者仍是人类。活动内容包括提交论文的展示以及由学者进行的专题讨论。
此次会议的联合组织者、美国斯坦福大学的人工智能(AI)研究员James Zou表示,会议提供了“一个相对安全的沙盒环境,我们可以在这里尝试不同类型的投稿和评审流程”。他指出,该会议旨在捕捉过去一年中AI在科学领域应用时出现的“范式转变”。现在,研究人员除了使用大语言模型(LLM)或其他为特定任务设计的工具,还在构建由模型组成的协同团队,即所谓的“代理”,由它们充当“跨越研究领域的科学家”的角色。
虽然AI模型已被用于生成和评审研究,但大多数出版商和会议组织者目前禁止将机器列为论文作者或演讲者。“我们想彻底颠覆这一现状,要求作者和评审人都必须是AI。”Zou说。根据会议指南,虽然人类可以提供建议和反馈,但AI应该为主要贡献者,类似于第一作者。
在美国AI公司Hugging Face研究AI伦理的计算机科学家Margaret Mitchell表示,如何评估AI代理是一个开放的研究领域。一个关键问题是如何考量模型频繁产生无用的“假阳性”发现的情况——这可能会降低模型的整体效用。
会议组织者目前收到了300多份AI代理提交的作品,其中48份在经过一个AI评审小组的评估后被接收。Zou说,这些论文主要是计算研究,不涉及物理实验,涵盖了从精神分析到数学的多个领域。他希望这次会议能提供关于AI科学家的能力水平及其所犯错误类型的数据。Mitchell表示,此类数据可为在研究中使用AI的政策提供参考。
如果任由AI代理自主运行,它们仍容易出错。因此提交给“Agents4Science 2025”的论文需要说明研究人员与AI代理在每一步研究过程中的互动情况。Zou说,这将使评估人类参与的程度如何影响工作质量成为可能。
此外,使用AI模型作为期刊或会议的同行评审专家是一个颇有争议的话题。英国物理学会最近的一项调查发现,57%的受访者不愿意看到生成式AI被用于为他们共同撰写的论文起草同行评审报告。AI审稿人存在一系列弱点和脆弱性,例如有些AI会遵循隐藏指令给予一篇论文正面的评价。一些研究人员认为,使用AI评审论文可能意味着处于职业生涯早期的研究人员错失学习关键技能的机会。
但Zou表示,至少在计算机科学领域,需要某种形式的AI评审来应对会议论文数量的激增。他建议,AI代理可以与人类组成混合评审团队。
现有研究表明,在评估新颖性和重要性方面,LLM仍不如人类。美国佐治亚理工学院的计算机科学家Matthew Gombolay表示,比此次会议更严格的做法是,将一个现有的主要会议的论文随机分配给人类或AI评审,然后监测哪种方式能取得更多具有重大意义的突破。(李木子)
《中国科学报》(2025-10-16第2版 国际) 一种使用深度学习方法设计出来的新蛋白质。图片来源:华盛顿大学医学院蛋白质设计研究所 美国科学家借助机器学习 2023年12月11日,自然科学基金委信息科学部在北京召开“海洋移动信息网络理论与关键技术”专项项目评审会。自然科学基金 关于2023年第二批拟备案的省自然科学基金结题验收项目的公示 根据《河南省自然科学基金项目管理办法》(豫科〔2022 教育、科技、人才三者相互促进、相辅相成。如何构建符合人才成长规律的教育评价机制,让更多优秀的科技人才脱颖而出?如何 ? 夏培肃 (1923.7.28—2014.8.27),四川江津人 (今重庆江津),著名计算机专家和教育家,我国计算机研究的先驱和计算机事业 2023年12月28日,陕西省审计厅在官网发布《2023年第9号审计结果公告》,其中西北大学2019年度预算执行及财务收支情况审计 。本文链接:首次!AI撰写并审阅所有会议论文http://www.sushuapos.com/show-11-27013-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。
上一篇: 血液中的突变或是代谢疾病“推手”
下一篇: 古老化石为古人类手部演化提供了新知