SWE-EVO：長期間のソフトウェア進化シナリオにおけるコーディングエージェントのベンチマーク

この記事は、複雑で長期的なソフトウェア進化タスクにおけるコーディングエージェントを評価するためのベンチマーク、SWE-EVOを紹介しています。 長期的なシナリオに焦点を当てていることから、より単純なコーディングタスクを超え、持続的な開発とメンテナンスを処理するエージェントの能力を評価しようとしていることが示唆されます。「ベンチマーク」という用語の使用は、さまざまなエージェントの比較分析を意味しており、この分野を進歩させる上で価値があります。 出典であるArXivは、これが研究論文である可能性が高いことを示しています。

• •SWE-EVOは、コーディングエージェントを評価するための新しいベンチマークです。
• •このベンチマークは、長期的なソフトウェア進化シナリオに焦点を当てています。
• •この研究では、さまざまなコーディングエージェントの比較が行われる可能性があります。