본문 바로가기
스터디 열기

AIC-209 아직 80%를 못 넘은 시험 23개, 가장 낮은 곳은 CL-bench Life 22%

아직 보정 점수 80%를 못 넘은 시험을 최고 점수 순서로 가로 막대로 그린 그림.

그림 AIC-209. 큰 그림(PNG 3000px)과 SVG는 자유롭게 가져다 쓸 수 있습니다.

무엇을 보여 주나

최근 2년 안에 평가가 있었던 시험 가운데 아직 보정 점수 80% 아래인 시험 23개입니다. Epoch가 대체됐다고 표시한 시험은 뺐습니다.

읽는 법

가장 낮은 곳은 CL-bench Life(22%), CL-bench(27%), OSWorld 2.0(31%), SpireClimb(34%)입니다. 긴 맥락, 실제 컴퓨터 조작, 오래 이어지는 게임처럼 한 번에 답이 나오지 않는 시험이 많습니다.

주의할 점

80%는 이 책이 정한 기준이지 '다 풀었다'는 뜻이 아닙니다. Winogrande, PIQA 같은 오래된 시험이 목록에 있는 것은 어려워서가 아니라 Epoch의 천장 설정 때문일 수 있습니다. 이 그림은 보정 점수이고 소수점을 버렸으므로 AIC-206~208의 원점수와 값이 조금 다릅니다. 출처를 확인하지 못한 Remote Labor Index(자료의 최고 21%)는 뺐습니다.

출처

Epoch AI 벤치마크 허브. 위니브 계산.

인용할 때

출처: 주식회사 위니브, 『그래프로 보는 AI의 속도』(2026년 11월판), 그림 AIC-209, 원자료: Epoch AI 벤치마크 허브

마지막 수정