Science sandboxes 衡量 AI 智能体的科学能力

摘要

Science sandboxes 是一个用于研究 AI 智能体科学能力的框架：让智能体在实验、反馈和假设修正的循环中，通过“wet”物理实验、“damp”（基于经验数据训练的预测模型）和“dry”人为规则等方式查询自然世界。该框架在调控基因组学和蛋白质适应度预测两个生物学设置中测试了前沿智能体，发现它们有时能优化定量指标却不理解底层规则，尤其在规则超出常见生物学先验时，其科学推理能力会下降。Science sandboxes 因而让科学能力的边界可被测量，并为研究和扩展这种能力提供了受控环境。