MathMixup：インテリジェントデータと学習によるLLMの数学的推論を革新

MathMixupは、大規模言語モデル (LLM) の数学的推論能力を向上させる画期的なデータ合成アプローチを導入しました。 この革新的な方法は、効果的なカリキュラム学習とLLMのパフォーマンス向上に不可欠な、難易度を制御可能な高品質の問題を生成します。 その結果生み出されたMathMixupQAデータセットは、そのカリキュラム学習戦略と相まって、LLMの数学的能力を大幅に向上させることを約束します。

• •MathMixupは、数学的推論問題を生成するための新しいデータ合成パラダイムを採用しています。
• •このアプローチは、データの品質を保証するために、自動自己チェックと手動スクリーニングを組み込んでいます。
• •ファインチューニングされたQwen2.5-7Bは、数学的ベンチマークで最先端の結果を達成しています。