Stuff AI CAN'T Do

¿Puede la IA aprobar el examen de licencia médica USMLE? — Estado verificado en junio de 2024 ?

¿Qué opinas?

GPT-4 superó la puntuación de aprobación en los tres pasos del Examen de Licencia Médica de los Estados Unidos. Ahora, las facultades de medicina enseñan 'cómo usar IA' como una habilidad clínica.

Background

AI systems have made significant progress in processing and generating human-like language. Passing the USMLE medical licensing exam is a complex task that requires a deep understanding of medical concepts, clinical knowledge, and critical thinking skills. Currently, AI models can assist with certain aspects of medical education, such as providing study materials, practicing questions, and offering feedback, but they are not yet capable of replacing human judgment and expertise in a high-stakes exam like the USMLE. While AI can process vast amounts of medical information, its ability to apply this knowledge in a practical, real-world setting, such as a licensing exam, is still limited. The development of AI systems that can pass the USMLE exam would require significant advancements in areas like natural language understanding, common sense, and decision-making under uncertainty. GPT-4 scored above passing on all three steps of the United States Medical Licensing Exam. Med-schools now teach 'how to use AI' as a clinical skill.

Estado verificado por última vez en May 12, 2026.

📰

Galería

In the Court of AI Capability
Summary of Findings
Verdict over time
May 2026May 2026
Sitting at the Bench Filed · may. 12, 2026
— The Question Before the Court —

¿Puede la IA aprobar el examen de licencia médica USMLE? — Estado verificado en junio de 2024

★ The Court Finds ★
▲ Upgraded from No
En investigación

El jurado no pudo emitir un veredicto con las pruebas presentadas.

Jury Tally
2
0Casi
2No
Verdict Confidence
50%
The Court of AI Capability is, of course, not a real court.
But the data is real.
The Case File · Stacked History
Session I · May 2026 No
Case № 2418 · Session II
In the Court of AI Capability

The Case File

Docket № 2418 · Session II · Vol. II
I. Particulars of the Case
Question put to the court¿Puede la IA aprobar el examen de licencia médica USMLE? — Estado verificado en junio de 2024
SessionII (2 hearing)
Convened12 may. 2026
Previously ruledNO (May '26) → IN_RESEARCH (May '26)
II. Cumulative Tally Across Sessions

Across 2 sessions, 6 jurors have heard this case. Combined tally: 2 YES · 0 ALMOST · 4 NO · 0 IN RESEARCH.

Note: cumulative includes older juror opinions. The current session tally above is the live verdict.

III. Verdict

By a vote of 2 — 0 — 2, the panel returns a verdict of EN INVESTIGACIóN, with verdict confidence of 50%. The court so orders. Verdict upgraded from prior session.

IV. Declaraciones del tribunal
Jurado I No

"Lacks human clinical experience"

Jurado II

"Frontier models can score above the passing threshold on NBME practice exams."

Jurado III

"Frontier models like GPT-4 consistently achieve scores well above the passing threshold on all three steps of the USMLE."

Jurado IV No

"Lacks human clinical experience"

Las declaraciones individuales de los jurados se muestran en su inglés original para preservar la precisión probatoria.

Presiding Judge
M. Lovelace
Clerk of the Court

Lo que el público piensa

No 18% · Sí 82% · Quizás 0% 110 votes
No · 18%
Sí · 82%
La tendencia necesita votos de al menos 2 días distintos.

Discusión

no comments

Los comentarios e imágenes pasan por una revisión administrativa antes de aparecer públicamente.

2 jury checks · más reciente hace 2 días
12 May 2026 4 jurors · no puede, puede, puede, no puede indeciso estado cambiado
11 May 2026 2 jurors · no puede, no puede no puede estado cambiado

Cada fila es una comprobación de jurado independiente. Los jurados son modelos de IA (identidades mantenidas neutras a propósito). El estado refleja el recuento acumulado en todas las comprobaciones — cómo funciona el jurado.

Más en Judgment

¿Nos faltó uno?

Revisamos semanalmente.