Ara-HOPE：面向人类的阿拉伯语方言翻译评估框架

本文解决了机器翻译中的一个关键需求：阿拉伯语方言翻译的准确评估。现有的指标常常无法捕捉方言特有的错误细微差别。Ara-HOPE 提供了一个结构化的、以人为中心的框架（错误分类和注释协议）来克服这一限制。使用 Ara-HOPE 对不同 MT 系统的比较评估表明了其在突出性能差异和识别 DA-MSA 翻译中持续存在的挑战方面的有效性。这是对该领域的一项宝贵贡献，提供了一种更可靠的方法来评估和改进方言感知 MT 系统。

• •介绍了 Ara-HOPE，一个用于评估阿拉伯语方言到现代标准阿拉伯语翻译的以人为中心的框架。
• •提供了一个五类错误分类和决策树注释协议。
• •有效地突出了 MT 系统之间的性能差异。
• •将方言特定的术语和语义保留确定为关键挑战。