순서가 있습니다. 포털 넷(연구방·지식센터·커뮤니티·아카데미)을 먼저 담고,
SSRA 는 맨 나중에 담아 주세요. SSRA 를 먼저 담으면 나머지가 그 안에 포함된 것으로
잡혀 따로 담기지 않습니다. 아이콘도 담을 차례대로 놓았습니다 — 왼쪽부터 차례로 누르시면 됩니다.
A benchmark of expert-level academic questions to assess AI capabilities
Long Phan, Alice Gatti, Nathaniel Li 외 · Nature · 2026년 · 조회 27
왜 이 논문인가 — 선정 기준
오늘의 Editor's Pick · 전체 분야에서 그날 가장 주목할 논문 1편
2026-01 발표 · 피인용 990회 · 분야 내 인용 영향력 상위권 · 동년 인용 상위 1% · 원 분야 IT
전체 분야 Editor’s Pick(가장 주목할 논문)으로 선정된 이유는 2026년 발표 논문 중 인용 상위 1%에 해당하는 990회 이상의 피인용 수 등 매우 높은 인용 영향력을 보였기 때문이다.
논문 요약
이 논문은 현재 벤치마크가 대형 언어 모델(LLM)의 실력 향상을 따라가지 못하고 있다는 문제를 인식하고, 인간 지식 최전선을 겨냥한 새로운 평가 도구인 Humanity's Last Exam(HLE)을 제안한다. HLE은 수학·인문·자연과학 등 수십 분야에 걸쳐 2,500개의 전문가 수준 폐쇄형 질문으로 구성되며, 객관식 및 단답형 형태로 자동 채점이 가능하도록 설계되었다. 각 문제는 명확히 검증 가능한 정답을 갖지만 기존 모델이 빠르게 풀 수 없도록 난이도가 조정되었다.
후속 연구설계에 활용하기
후속 연구에서는 HLE을 활용해 새로운 LLM의 분야별 성능 변수를 정의하고, 멀티모달 처리 능력과 문제 유형별 정답률을 비교·분석하는 설계에 적용할 수 있다.
핵심어
AI 평가대형 언어 모델멀티모달 벤치마크전문 학술 질문
실존 확인
이 논문은 OpenAlex에서 후보로 수집한 뒤, Crossref에 등록된 DOI와 제목 일치를 확인해 노출합니다.
SSRA가 문헌연구에서 인용 논문의 실재 여부를 검증하는 원칙과 같습니다.