マルチターン会話における行動誘発

この論文は、マルチターン会話設定における大規模言語モデル（LLM）の評価という重要な問題に取り組んでいます。主にシングルターンシナリオ向けに設計された既存の行動誘発技術を、より複雑なマルチターンコンテキストに拡張しています。この論文の貢献は、誘発方法を分類するための分析フレームワーク、オンライン方法の一般化されたマルチターン定式化の導入、およびこれらの方法のマルチターンテストケース生成に関する経験的評価にあります。この結果は、オンライン方法が行動誘発入力を発見する上で効果的であることを強調しており、特に静的メソッドと比較して、LLM評価における動的ベンチマークの必要性を強調しています。

• •行動誘発技術をマルチターン会話に拡張。
• •オンライン誘発方法の一般化されたマルチターン定式化を導入。
• •行動誘発入力を発見する上でのオンラインメソッドの有効性を実証。
• •LLM評価における動的ベンチマークの必要性を強調。