AIC-005 넘은 시험만 보면, 2023년 이전 시험은 3.5년, 2024년 이후 시험은 9개월 만에 80%를 넘었다

무엇을 보여 주나
시험이 나온 날부터 어떤 모델이 보정 점수 80%를 처음 넘은 날까지를 막대로 그렸습니다. 2023년 이전에 나온 시험 9개는 중앙값 3.5년, 2024년 이후 시험 14개는 중앙값 9.3개월이 걸렸습니다.
읽는 법
아래로 갈수록 새 시험입니다. 점선은 아직 80%를 못 넘은 시험이고 옆에 지금까지의 최고 점수를 적었습니다. 마름모는 시험이 나올 때 이미 어떤 모델이 80%를 넘어 있던 경우입니다.
주의할 점
이 비교는 한쪽으로 기울어 있습니다. 2024년 이후 시험 42개 가운데 22개는 아직 못 넘었고, 6개는 나올 때 이미 넘어 있었습니다. 최근 시험은 지켜본 기간이 짧아 '넘은 것만' 세면 걸린 시간이 짧게 나오기 쉽습니다. 옛 시험 가운데 Winogrande·PIQA·ANLI·SuperGLUE는 평가가 끊기거나 80%에 닿지 않아 막대가 없습니다. 80%라는 문턱은 위니브가 정했습니다. 재사용 조건 때문에 Artificial Analysis·Scale 출처 시험은 뺐고, 점수 출처가 적혀 있지 않은 Remote Labor Index(Scale·CAIS)도 보수적으로 뺐습니다.
출처
Epoch AI 벤치마크 허브(자체 평가 CC BY 4.0, 외부 점수는 각 원출처: 논문·HELM·각 순위표). 계산은 위니브.
인용할 때
출처: 주식회사 위니브, 『그래프로 보는 AI의 속도』(2026년 11월판), 그림 AIC-005, 원자료: Epoch AI 벤치마크 허브
마지막 수정