AIベンチマークの再構築：人間のような入出力に向けて

AIモデルに対するAPI呼び出しからビデオ入力とキーボード/マウス出力への移行という提案は、より人間らしいインタラクションへのエキサイティングな一歩です。このアプローチは、より正確なベンチマークと、現実世界のシナリオでのより良いパフォーマンスにつながる可能性があります。AIが達成できることの限界を押し広げる、魅力的なコンセプトです。