2026-10-26

把专家经验交给智能体之前,需要整理什么?

从量子实验工作流出发,讨论工具接口、判断条件、异常恢复和执行记录各自承担的职责。

让智能体使用一个工具,与让它完成一段专业工作,是两个不同的问题。前者需要一个可调用的接口;后者还需要知道什么时候调用、结果是否合格,以及失败后该怎么办。

在量子校准这样的场景里,一次测量的结果往往决定下一次测量的参数。只把现有 notebook 交给模型,不能自动补齐专家平时依靠经验完成的判断。

先整理判断条件

专业人员通常知道哪些曲线可信、哪些异常值得重测。需要把这些经验写成可检查的条件:输入参数的范围、成功结果的特征、需要停止或请人复核的情况。没有这些条件,工具虽然运行成功,任务仍可能做错。

工具接口要返回可复查的结果

返回“成功”通常不够。原始数据、图像、拟合参数和结果标识应能够关联到同一次操作。智能体作出判断后,人也能回到相同材料,检查当时为何接受或拒绝这个结果。

把异常恢复放进流程

重试、调整参数、跳过和回退并不等价。它们应有明确的触发条件和影响范围。遇到超出边界的结果时,保留现场并交回专业人员,比让系统无限尝试更容易管理。

用完整任务检查改造是否有效

评测不只看某一次工具调用是否正确。还要检查前置条件、长期状态、异常恢复和最终产出。上线前先选取边界清楚的一段工作,在相同验收标准下比较改造前后的执行结果。

这些经验参考了团队参与的科研工作;具体到新的行业,工具和判断标准都需要与领域伙伴重新确认。

参考:Vibe Calibration 原论文