release
ARC Prize, ARC-AGI-2 공개하고 효율성 평가 강화
(1년 전)
ARC Prize가 ARC-AGI-2를 공개함. 사람이 풀기에는 비교적 쉽지만 당시 AI 시스템에는 어려운 새 과제를 제시하고, 정답률뿐 아니라 과제를 해결하는 데 든 비용과 효율을 평가에 포함함.
관련 항목
상세 내용
ARC-AGI-2는 단순한 규모 확장이나 암기만으로 풀기 어려운 기호 해석·구성적 추론·맥락 기반 규칙 적용을 강조함. 공개 평가와 비공개 평가를 나누고 효율성 조건을 강화해 벤치마크 오염과 무제한 추론 비용이 점수를 왜곡하는 문제를 줄이려 한 개정.