超越准确率：平衡准确率作为评估LLM的更优指标

这篇ArXiv论文强调了使用平衡准确率的重要性，平衡准确率是一种比简单准确率更稳健的指标，用于评估大型语言模型 (LLM) 的性能，尤其是在存在类别不平衡的情况下。Youden's J 统计量的应用为此评估提供了一个清晰且可解释的框架。

• •与原始准确率相比，平衡准确率是 LLM 评估的更优指标，尤其是在处理不平衡数据集时。
• •Youden's J 统计量提供了一种清晰的方法来计算和解释平衡准确率。
• •这些发现对开发和部署更可靠的基于 LLM 的系统具有影响。