无需微调的稀有词识别和翻译

发布:2025年12月26日 06:51
1分で読める
ArXiv

分析

本文解决了语音转文本系统中一个重要问题:处理稀有词的困难。所提出的方法提供了一种无需训练的替代方案,以取代通常成本高昂且容易出现灾难性遗忘等问题的微调。使用任务向量和词级算术是一种新颖的方法,有望实现可扩展性和可重用性。结果表明,其性能与微调模型相当或更优,这一点尤其值得关注。

引用

所提出的方法在目标词上与微调模型匹配或超越,将整体性能提高了约5个BLEU,并减轻了灾难性遗忘。