语言代理中程序记忆检索的基准

本文介绍了一个用于评估语言代理中程序记忆检索的基准。 这是一个重要的贡献，因为它提供了一种标准化的方法来评估和比较不同语言模型在需要回忆和应用顺序步骤或程序任务中的性能。 关注程序记忆很重要，因为它是现实世界智能和任务完成的关键方面。 该基准的设计和评估指标将是其影响的关键。

• •介绍了一个用于评估语言代理中程序记忆检索的基准。
• •提供了一种标准化的方法来评估和比较语言模型的性能。
• •关注程序记忆，这是现实世界智能的一个关键方面。
• •基准的设计和评估指标是其影响的关键。