01
人工智能（AI）在自身研究领域已取得长足进展——能够改进现有算法或开发新算法。然而，根据预印本服务器arXiv近日公布的一项研究，AI目前还无法取代其创造者。
The AI Scientist系统最早的应用之一就是研究AI本身。图片来源：La Pico de Gallo
“我认为，目前开放性研究的完全自动化远未到来。”美国普林斯顿大学的计算机科学家、该预印本合著者Sayash Kapoor表示。
由东京Sakana AI公司团队主导的科研小组率先尝试全面自动化科学流程，涵盖从提出想法、撰写论文到自我评估的全过程。该团队于2024年发布了名为“The AI Scientist”的系统，并于今年3月在《自然》发表了改进版本的研究成果。
The AI Scientist的任务是研究机器学习中的陷阱问题。它生成的3篇论文被提交至一个会议研讨会进行同行评审，其中一篇获得了足以被接受的高分。但Kapoor表示，同行评审是评估论文质量的一种不可靠方式，尤其是在AI研究领域。
为了使AI达到比同行评审更高的标准，Kapoor和同事提出了一项名为“影子评估”的新挑战。他们首先挑选了今年提交给神经信息处理系统大会（NeurIPS）的两篇论文，然后让AI工具根据每篇论文中的研究问题开展研究并撰写论文，再请原作者对生成的内容进行仔细审查。其理念在于，相比忙碌的同行评审人，这些作者具备更多专业知识和投入意愿，能够更深入地分析研究成果。
0
评论 (0)