Início › AI Benchmark › GPT-4o (May 2024)
OpenAI lançado em 13/05/2024 API access

GPT-4o (May 2024)

GPT-4o (May 2024) (OpenAI) foi lançado em 13/05/2024. No ranking de capacidade da Epoch AI (ECI), está em 165º lugar entre 267 modelos, com 129,05. Comparado aos modelos da mesma geração, o melhor resultado dele é em MMLU: 88,1%, 1º de 49.

165º de 267 no ranking por ECI
129,05 ECI, índice de capacidade da Epoch AI
sem par ELO na Arena, preferência humana
não medido LiveBench, média geral de 0 a 100
Ainda sem votos. Dê a sua nota.
O que as provas dizem

Onde o GPT-4o (May 2024) se destaca e onde fica atrás, pelos números

O GPT-4o (May 2024) tem resultado publicado em 33 provas compiladas pela Epoch AI. A régua aqui é a geração: a posição dele entre os modelos lançados entre 17/08/2023 e 11/08/2024 que fizeram a mesma prova. Contra o acervo inteiro, que tem modelos de 2023, um lançamento recente fica no topo de quase tudo, e isso não diz nada.

Onde se destaca

Provas em que fica no terço de cima da própria geração.

MMLU88,1%
1º de 49 na geração · 1º de 92 no geral
MATH nível 553,3%
1º de 24 na geração · 40º de 73 no geral
Dtbench64,5%
1º de 20 na geração · 100º de 148 no geral
WeirdML25,1%
1º de 13 na geração · 92º de 112 no geral
LiveBench55,33
1º de 7 na geração · 15º de 32 no geral

Onde fica atrás

Provas em que fica na metade de baixo da própria geração.

Não fica na metade de baixo da geração em nenhuma prova com 6 ou mais modelos comparados.

Ver as 33 provas, uma a uma
ProvaNotaNa geraçãoNo geralRecorde da prova
GPQA Diamond 49,2% 2º / 25 129º / 173 96,4% Gemini 4 Argon
AIME 2024 e 2025 (OTIS) 6,4% 4º / 19 144º / 168 100,0% GPT-5.5
Dtbench 64,5% 1º / 20 100º / 148 98,9% Claude Opus 5.5
Lmca 16,59 2º / 9 100º / 121 68,23 Claude Opus 5.5
CritPt 0,0% 1º / 2 (empatado com 1) 91º / 112 32,3% GPT-5.6 Sol
WeirdML 25,1% 1º / 13 92º / 112 93,6% GPT-6 Astra
MMLU 88,1% 1º / 49 1º / 92 88,1% GPT-4o (May 2024)
Frontiermath Tiers 1 3 V2 0,4% 3º / 4 85º / 86 93,7% GPT-6 Astra
ARC-AGI 2 0,0% 1º / 2 (empatado com 1) 76º / 83 95,0% GPT-6 Astra
ARC-AGI 4,5% 1º / 1 77º / 81 98,5% Claude Fable 5
SimpleQA Verified 26,0% 1º / 3 64º / 81 76,0% Gemini 4 Argon
Xadrez (problemas) 6,0% 1º / 3 75º / 80 76,0% GPT-6 Astra
SimpleBench 17,8% 4º / 5 72º / 74 81,9% Claude Fable 5
MATH nível 5 53,3% 1º / 24 40º / 73 98,1% GPT-5
FrontierMath 0,3% 1º / 1 61º / 65 51,7% GPT-5.5
ForecastBench 57,70 5º / 11 48º / 62 62,50 o3
Hle 2,7% 1º / 1 39º / 39 54,8% GPT-6 Astra
Aider Polyglot 23,10 1º / 2 31º / 38 88,00 GPT-5
Escrita criativa (Lech Mazur) 8,18 1º / 2 11º / 38 8,60 GPT-5
EnigmaEval 0,8% 2º / 2 33º / 36 39,3% Claude Fable 5
BALROG 32,3% 1º / 5 16º / 32 68,3% GPT-6 Astra
LiveBench 55,33 1º / 7 15º / 32 82,35 Gemini 2.5 Pro (Jun 2025)
SWE-bench Verified 31,0% 1º / 1 32º / 32 83,5% Claude Opus 4.7
METR: horizonte de tempo 9,17 1º / 4 24º / 29 719 Claude Opus 4.6
Gso 0,0% 1º / 1 28º / 28 88,2% Claude Fable 5.1
GeoBench 3.696 1º / 2 14º / 24 4.333 Gemini 3 Flash
VPCT 40,0% 1º / 2 12º / 22 91,0% Gemini 3 Pro
Cybench 12,5% 1º / 5 13º / 19 93,0% Claude Opus 4.6
CAD-Eval 26,0% 1º / 2 12º / 14 74,0% o3
The Agent Company 16,7% 1º / 4 8º / 14 52,4% DeepSeek-V3.2-Exp
GDPval 9,9% 1º / 1 11º / 11 49,7% GPT-5.2
ScienceQA 88,5% 1º / 2 1º / 6 88,5% GPT-4o (May 2024)
Video Mme 71,9% 1º / 2 3º / 6 75,0% Gemini 1.5 Pro (Sept 2024)

Em cada prova vale o melhor nível de esforço que o modelo fez, como no ranking. Fonte das notas: Epoch AI, sob CC BY 4.0.

Comparação

Com quem comparar o GPT-4o (May 2024)

Os modelos de outros laboratórios mais próximos em capacidade e lançados na mesma época, no máximo dois por laboratório. Clique em qualquer um para ver a página dele.

ModeloLaboratórioECIELOLiveBenchLançamento
Phi-4 Microsoft Research 130,43 1.231 n/d 12/12/2024
Gemini 1.5 Flash (Sep 2024) Google DeepMind 129,37 n/d n/d 24/09/2024
GPT-4o (May 2024) OpenAI 129,05 n/d n/d 13/05/2024
Qwen2.5-72B Alibaba 129,00 n/d n/d 19/09/2024
Llama 3.1-405B Meta AI 128,76 n/d n/d 23/07/2024
Mistral Large 2 (Nov 2024) Mistral AI 128,53 n/d n/d 18/11/2024
Qwen2.5-32B Alibaba 128,53 n/d n/d 17/09/2024
Frente a frente

GPT-4o (May 2024) ou Qwen2.5-72B?

O Qwen2.5-72B é o modelo de outro laboratório mais próximo do GPT-4o (May 2024) em capacidade. Nas 13 provas que os dois fizeram, o placar é este:

GPT-4o (May 2024) à frente em 10 Qwen2.5-72B à frente em 3
As maiores diferenças primeiro
ProvaGPT-4o (May 2024)Qwen2.5-72B
BALROG 32,3% 16,2%
METR: horizonte de tempo 9,17 5,17
WeirdML 25,1% 16,0%
The Agent Company 16,7% 11,8%
AIME 2024 e 2025 (OTIS) 6,4% 8,1%
Lmca 16,59 13,42
MATH nível 5 53,3% 63,2%
GeoBench 3.696 3.448
MMLU 88,1% 85,3%
Dtbench 64,5% 62,9%

Placar sem peso: cada prova conta um ponto, seja de matemática, seja de programação. O ponto marca quem foi melhor em cada linha.

Família

Os outros modelos da OpenAI

Os modelos do mesmo laboratório mais próximos no tempo, do mais novo para o mais antigo.

ModeloLançamentoECIELOLiveBenchAcesso
GPT-4.1 14/04/2025 136,77 n/d n/d API access
GPT-4.5 27/02/2025 136,73 n/d n/d API access
o3-mini 31/01/2025 140,33 1.379 n/d API access
o1 17/12/2024 141,84 1.383 n/d API access
o1-mini 12/09/2024 135,82 1.362 n/d API access
GPT-4o mini 18/07/2024 126,58 n/d n/d API access
GPT-4o (May 2024) 13/05/2024 129,05 n/d n/d API access
GPT-4 Turbo (Apr 2024) 09/04/2024 127,25 n/d n/d API access
GPT-3.5 Turbo (Nov 2023) 06/11/2023 118,58 n/d n/d API access
Sua avaliação

Já usou o GPT-4o (May 2024)? Dê sua nota

n/d de 5
ainda sem votos

Opinião de quem usa, não medição: a nota fica separada do ranking e não mexe na posição de ninguém. Um voto por navegador, sem cadastro, e dá para trocar a nota depois.

Toque numa estrela para votar.
Perguntas frequentes

O que as pessoas perguntam sobre o GPT-4o (May 2024)

Qual a posição do GPT-4o (May 2024) no ranking de IA?

No AI Benchmark da ROO3, ordenado pelo ECI da Epoch AI, o GPT-4o (May 2024) está em 165º lugar entre 267 modelos, com ECI de 129,05. O ECI é um índice composto que junta vários benchmarks difíceis numa escala só. A posição muda quando sai modelo novo, e a página é apurada seis vezes por dia.

O GPT-4o (May 2024) é melhor que o Qwen2.5-72B?

Nas 13 provas que os dois fizeram e que a Epoch AI compilou, o GPT-4o (May 2024) fica à frente em 10, atrás em 3 e empata em 0. É uma comparação prova a prova, sem peso: uma vitória em matemática conta igual a uma em programação. Para escolher entre os dois, vale olhar as provas que se parecem com o seu uso.

Em que o GPT-4o (May 2024) vai melhor?

Comparado aos modelos da mesma geração (lançados até 9 meses antes e até 3 meses depois dele), os melhores resultados relativos do GPT-4o (May 2024) são: MMLU (1º de 49); MATH nível 5 (1º de 24); Dtbench (1º de 20). A régua é a posição entre os modelos daquela época que fizeram a mesma prova.

De onde vêm os números desta página?

Das mesmas três fontes do ranking, todas com licença aberta: Epoch AI (ECI e provas individuais, CC BY 4.0), Arena (ELO de preferência humana, CC BY 4.0) e LiveBench (média geral, CC BY-SA 4.0). A ROO3 não mede modelo nenhum. Quando a página traz número publicado pelo próprio fabricante, ele aparece na análise escrita, dito como sendo do fabricante, e nunca entra no ranking.

Fontes

De onde vem cada número

Epoch AI, "AI Benchmarking Hub". Publicado em epoch.ai. Dados sob licença CC BY 4.0, reordenados por roo3.co.

Leaderboard da Arena (LMArena), do dataset público lmarena-ai/leaderboard-dataset no Hugging Face, sob licença CC BY 4.0. Não somos afiliados à Arena.

LiveBench, da equipe do LiveBench, publicado em livebench.ai sob licença CC BY-SA 4.0. A média geral é recalculada por roo3.co com a mesma conta do site (média das categorias), e esses números seguem sob CC BY-SA 4.0. Não somos afiliados ao LiveBench.

← Ver o ranking completo