InteracTalker：プロンプトベースの人とオブジェクトのインタラクションと同時発話ジェスチャー生成

この記事は、プロンプトによって駆動される人とオブジェクトのインタラクションに焦点を当てたシステムであるInteracTalkerを紹介しています。主な特徴は、発話と同期したジェスチャーの生成です。この研究は、自然言語理解、ジェスチャー合成、およびより直感的な人間とコンピューターのインタラクションのためのこれらのモダリティの統合など、マルチモーダルAIの進歩を探求している可能性が高いです。プロンプトの使用は、ユーザーコントロールとインタラクションの定義における柔軟性に焦点を当てていることを示唆しています。