프론티어 AI가 의료 전문 툴을 초월한 내용을 분석한 논문 재검증 결과.
Nature Medicine에 게재된 논문에서 범용 모델들이 의료 전용 AI 도구보다 더 우수한 성능을 보였다는 결과를 발표했습니다. 연구에서는 GPT-5.2, Gemini 3.1 Pro, Claude Opus 4.6 같은 모델이 OpenEvidence와 UpToDate AI와 비교되었습니다. 그러나 채점자간 일치도가 낮아 이러한 결과에 대한 신뢰도를 의심하게 만듭니다.
Revalidation of a study shows frontier AI outperformed specialized medical tools.
A paper published in Nature Medicine reveals that general-purpose AI models outperformed specialized medical tools. The study compared models like GPT-5.2, Gemini 3.1 Pro, and Claude Opus 4.6 against OpenEvidence and UpToDate AI. However, the low inter-rater reliability raises concerns about the trustworthiness of these results.