Valumigo

Epoch AI · 분야별 최고 난도 문제 (HLE)

공개된 벤치마크 자료(LMArena 사용자 투표 순위, Epoch AI 시험 점수, OpenRouter 사용량 순위)를 정기적으로 받아 보여 줍니다. 각 순위표의 공개일과 가져온 날을 함께 표시합니다. 이 사이트가 직접 매긴 점수가 아닙니다.

LMArena 점수는 사람들이 두 모델의 답을 나란히 보고 더 나은 쪽에 투표한 결과(Elo 방식)입니다. 점수 차이가 신뢰 구간 안이면 사실상 비슷한 수준으로 보세요.

이 순위표 읽는 법

무엇을 재나: Center for AI Safety와 Scale AI가 만든 Humanity's Last Exam입니다. 여러 분야 전문가들이 작성한 공개 문제 2,500개로 구성되며, 기존 벤치마크의 포화에 대응해 개발됐습니다.

점수 읽는 법: 정답률(%)입니다. 고난도 지식과 추론을 평가하며, 점수는 모델과 도구 사용 조건에 따라 달라집니다.

주의할 점: 문항과 정답·채점의 오류가 지적됐습니다. 작은 점수 차이는 문항 결함, 평가 조건과 통계적 불확실성을 함께 확인해 해석하세요.

이번 순위에서 읽을 점

  • 최고 점수는 GPT-6 Astra의 54.8%입니다.
  • 1위와 5위의 차이는 10.5%p입니다.
  • 상위 10개 중 OpenAI 모델이 3개로 가장 많습니다.
  • 이 시험 결과가 공개된 모델은 30개입니다.

분야별 최고 난도 문제 (HLE) Epoch AI

Epoch AI가 직접 측정했거나 개발사·평가 기관이 발표한 점수를 모은 자료입니다. 시험마다 평가된 모델이 달라서, 최신 모델이 아직 없는 시험도 있습니다. 같은 모델의 추론 강도별 결과 중 가장 높은 점수를 보여 줍니다. · 가져온 날 2026-10-04

OGPT-6 Astra
54.8%
AnthropicClaude Fable 5.1
46.5%
GoogleGemini 3.1 Pro Preview
46.4%
GoogleGemini 3.8 Flash
44.5%
OGPT-5.4 Pro
44.3%
MetaMuse Spark
40.6%
GoogleGemini 3 Pro Preview
37.5%
OGPT-5.4
36.2%
AnthropicClaude Opus 4.7
36.2%
AnthropicClaude Opus 4.6
34.4%
OGPT-5 Pro
31.6%
OGPT-5.2
27.8%
OGPT-5
25.3%
AnthropicClaude Opus 4.5
25.2%
Moonshot AIKimi K2.5
24.4%
OGPT-5.1
23.7%
GoogleGemini 2.5 Pro Preview
21.6%
Oo3
20.3%
OGPT-5 mini
19.4%
GoogleGemini 2.5 Pro Exp
18.2%

막대는 정답률(%)입니다. 0%부터 그립니다.

표로 보기 (상위 30개)
순위모델만든 곳출시일점수
1#1OGPT-6 Astra(unknown thinking)OpenAI2026-09-0354.8%
2#2AnthropicClaude Fable 5.1(xhigh)Anthropic2026-09-0146.5%
3#3GoogleGemini 3.1 Pro PreviewGoogle2026-02-1946.4%
4#4GoogleGemini 3.8 Flash(unknown)Google2026-09-0244.5%
5#5OGPT-5.4 ProOpenAI2026-03-0544.3%
6#6MetaMuse SparkMeta2026-04-0840.6%
7#7GoogleGemini 3 Pro PreviewGoogle2025-11-1837.5%
8#8OGPT-5.4(xhigh)OpenAI2026-03-0536.2%
9#9AnthropicClaude Opus 4.7(unknown)Anthropic2026-04-1636.2%
10#10AnthropicClaude Opus 4.6(max)Anthropic2026-02-0534.4%
11#11OGPT-5 ProOpenAI2025-10-0731.6%
12#12OGPT-5.2(unknown thinking)OpenAI2025-12-1127.8%
13#13OGPT-5(high)OpenAI2025-08-0725.3%
14#14AnthropicClaude Opus 4.5(unknown thinking)Anthropic2025-11-2425.2%
15#15Moonshot AIKimi K2.5Moonshot AI2026-01-2724.4%
16#16OGPT-5.1(unknown thinking)OpenAI2025-11-1323.7%
17#17GoogleGemini 2.5 Pro Preview(Jun 2025)Google2025-06-0521.6%
18#18Oo3(high)OpenAI2025-04-1620.3%
19#19OGPT-5 mini(unknown thinking)OpenAI2025-08-0719.4%
20#20GoogleGemini 2.5 Pro Exp(Mar 2025)Google2025-03-2518.2%
21#21Oo4-mini(high)OpenAI2025-04-1618.1%
22#22AnthropicClaude Sonnet 4.5(unknown thinking)Anthropic2025-09-2913.7%
23#23GoogleGemini 2.5 Flash Preview(Apr 2025)Google2025-04-1712.1%
24#24AnthropicClaude Opus 4.1(unknown thinking)Anthropic2025-08-0511.5%
25#25Googlegemini-2.5-flash-preview-05-20Google2025-05-2011.0%
26#26AnthropicClaude Opus 4Anthropic2025-05-2210.7%
27#27GoogleGemini 3.1 Flash-LiteGoogle2026-03-038.6%
28#28Zglm-4.5Z.ai2025-08-038.3%
29#29ZGLM-4.5-AirZ.ai2025-07-208.1%
30#30Oo1 ProOpenAI2025-03-198.1%

데이터: LMArena leaderboard dataset (CC BY 4.0). 변경: 각 순위표의 상위 50개만 표시, 점수는 반올림. https://huggingface.co/datasets/lmarena-ai/leaderboard-dataset회사 로고는 각 회사의 상표이며 구분을 돕기 위해서만 씁니다(아이콘: Simple Icons).데이터: Epoch AI — Capabilities & benchmarking (CC BY 4.0). https://epoch.ai/benchmarksSource: OpenRouter (openrouter.ai/rankings), as of 2026-10-04. Licensed under CC BY 4.0. https://openrouter.ai/rankings