ARC-AGI

ARC-AGI（Abstraction and Reasoning Corpus for Artificial General Intelligence）は、AI研究者のフランソワ・ショレが2019年に提案したベンチマークで、人間には易しくAIには難しい課題によって、初めて見る問題に適応する能力を測る。非営利団体ARC Prizeが運営し、版を重ねてきた。

格子パズルの入力と出力の例から規則を見つける以前の版とは異なり、第3版のARC-AGI-3では、説明なしに与えられる対話型のゲーム環境をAIが自ら探索し、目標と規則を見つけ出さなければならない。課題を解けたかどうかに加え、人間と比べた行動の効率も評価する。

この説明は、AIPOSTの記事と広く知られた事実をもとにまとめたものです。誤りがあれば訂正依頼でお知らせください。