오늘의 논문
오늘의 Editor's Pick 전체 분야 Crossref 실존 확인 2026-11-08 회차 지난 회차

전문 수준 학술 질문을 통한 AI 능력 평가 벤치마크

A benchmark of expert-level academic questions to assess AI capabilities
Long Phan, Alice Gatti, Nathaniel Li 외 · Nature · 2026년 · 조회 27
왜 이 논문인가 — 선정 기준
오늘의 Editor's Pick · 전체 분야에서 그날 가장 주목할 논문 1편
2026-01 발표 · 피인용 990회 · 분야 내 인용 영향력 상위권 · 동년 인용 상위 1% · 원 분야 IT
전체 분야 Editor’s Pick(가장 주목할 논문)으로 선정된 이유는 2026년 발표 논문 중 인용 상위 1%에 해당하는 990회 이상의 피인용 수 등 매우 높은 인용 영향력을 보였기 때문이다.
논문 요약
이 논문은 현재 벤치마크가 대형 언어 모델(LLM)의 실력 향상을 따라가지 못하고 있다는 문제를 인식하고, 인간 지식 최전선을 겨냥한 새로운 평가 도구인 Humanity's Last Exam(HLE)을 제안한다. HLE은 수학·인문·자연과학 등 수십 분야에 걸쳐 2,500개의 전문가 수준 폐쇄형 질문으로 구성되며, 객관식 및 단답형 형태로 자동 채점이 가능하도록 설계되었다. 각 문제는 명확히 검증 가능한 정답을 갖지만 기존 모델이 빠르게 풀 수 없도록 난이도가 조정되었다.
후속 연구설계에 활용하기
후속 연구에서는 HLE을 활용해 새로운 LLM의 분야별 성능 변수를 정의하고, 멀티모달 처리 능력과 문제 유형별 정답률을 비교·분석하는 설계에 적용할 수 있다.
핵심어
AI 평가대형 언어 모델멀티모달 벤치마크전문 학술 질문
실존 확인
이 논문은 OpenAlex에서 후보로 수집한 뒤, Crossref에 등록된 DOI와 제목 일치를 확인해 노출합니다. SSRA가 문헌연구에서 인용 논문의 실재 여부를 검증하는 원칙과 같습니다.
2026-11-08 확인 · 2026-11-08 선정
같은 회차의 다른 논문
HOT PAPER 경영·경제 14
생성 AI가 마케팅 미래를 형성하는 방식
NEW PAPER 경영·경제 22
AI 복잡성 하에서 디지털 플랫폼의 모듈 구조와 조정 비용
RESEARCH PAPER 경영·경제 14
가상현실 관광에서 소비자 행동을 확장된 SOR 모델로 탐구
HOT PAPER 사회과학 13
교육을 위한 대형 언어 모델: 설문조사와 전망
NEW PAPER 사회과학 15
확인할까 말까: 청소년들의 다중 텍스트 쓰기에서 출처 활용 행태
RESEARCH PAPER 사회과학 13
디지털 리터러시에서 디지털 역량으로: 교사 디지털 역량 프레임워크
HOT PAPER 교육 12
대형 언어 모델을 활용한 교육: 현황 조사 및 전망
NEW PAPER 교육 24
교육용 로봇 키트의 역량·행동·디자인 정렬을 위한 이론적 합성 및 개발 원칙
RESEARCH PAPER 교육 14
디지털 리터러시에서 디지털 역량으로: 교사 디지털 역량(TDC) 프레임워크
HOT PAPER 간호·보건 12
전 세계·지역·국가 별 요통 부담
NEW PAPER 간호·보건 13
브라질 상파울루 야생 파라과이 털두더지쥐의 혈액학적 프로필 및 혈구 형태
RESEARCH PAPER 간호·보건 11
급성·아급성·만성 요통 비침습 치료 임상진료지침
HOT PAPER IT 13
가이드 샘플링을 위한 DPM‑Solver++ 빠른 솔버
NEW PAPER IT 15
비전 트랜스포머‑CNN 앙상블과 라디오믹스 융합을 통한 유방암 교차 데이터셋 검출
RESEARCH PAPER IT 11
대형 언어 모델 기반 자율 에이전트 연구 동향 조사
HOT PAPER 자연과학 13
대규모 다변량 랜덤 효과의 간소화 적합: glmmTMB 구현
NEW PAPER 자연과학 13
인위적 소음이 야생동물에 미치는 영향에 관한 합성 연구 지도: 증거 격차와 정책 대응
RESEARCH PAPER 자연과학 13
SWISS-MODEL: 단백질 구조 및 복합체 동종·이종 모델링
HOT PAPER 예체능 15
의식적 인공지능과 생물학적 자연주의
NEW PAPER 예체능 13
헌신적 관점에서 보는 인식적 초선량행위
RESEARCH PAPER 예체능 13
초학문적 연구의 특성·잠재력·과제