PragWorld：在最小语言改动和对话动态下评估LLM的局部世界模型

这项研究引入了一个新的基准PragWorld，专门设计用于评估大型语言模型（LLMs）对局部世界模型的理解。 关注最小的语言改动和对话动态，为探测LLMs的能力提供了一种有价值的方法。

• •PragWorld提供了一个专门的基准，用于评估LLMs对其局部环境的理解。
• •使用最小的语言改动可以对世界模型的能力进行有针对性的评估。
• •包含对话动态为评估增加了现实性和复杂性。