EmbodiedLab：行動を通じて理解するエージェントのベンチマーク

Embodied agentsは、周囲の環境とどのように、いつ相互作用するかを自ら決定することで、現実世界の目標を達成することが期待されている。多くの目標において、世界の物理的な状態を変化させることは、目的そのものではなく手段となる。エージェントは相互作用を通じてシステムの状態を変化させ、フィードバックを観察し、目標を自ら達成するか、あるいは目標に何が必要かを学習するまで探索を行う。これは「知るために行動する（act to know）」プロセスである。

従来の操作ベンチマークは、目標とする状態が与えられた状態で「変化させるための行動」に留まっていた。また、科学的発見のベンチマークは「知ること」を評価するものの、物理的な実験を記号的なアクションや数値的なクエリに置き換えていた。EmbodiedLabはHugging Face Daily Papersにて1件のアップボートを獲得している。