ROAD: 用于零样本LLM代理对齐的调试

本文介绍了ROAD，一个无需依赖大型、标注数据集即可优化LLM代理的新框架。它将优化视为一个调试过程，使用多代理架构来分析失败并提高性能。这种方法特别适用于缺乏精心策划数据集的现实世界场景，提供了一种比RL等传统方法更具数据效率的替代方案。

• •ROAD通过以调试为中心的方法优化LLM代理，绕过了对大型标注数据集的需求。
• •该框架使用多代理架构（分析器、优化器、教练）来分析失败并生成决策树协议。
• •ROAD在学术基准和实际应用中都表现出改进的性能。
• •该方法具有样本效率，在几次迭代内实现了显著的性能提升。