순서가 있습니다. 포털 넷(연구방·지식센터·커뮤니티·아카데미)을 먼저 담고,
SSRA 는 맨 나중에 담아 주세요. SSRA 를 먼저 담으면 나머지가 그 안에 포함된 것으로
잡혀 따로 담기지 않습니다. 아이콘도 담을 차례대로 놓았습니다 — 왼쪽부터 차례로 누르시면 됩니다.
LLM-based automatic short answer grading in undergraduate medical education
Christian Grévisse · BMC Medical Education · 2024년 · 조회 21
왜 이 논문인가 — 선정 기준
HOT PAPER · 최근 가장 주목받는 논문 — 피인용·FWCI·동년 인용 백분위
2024-09 발표 · 피인용 86회 · 분야 내 인용 영향력 상위권 · 동년 인용 상위 1%
HOT PAPER 슬롯은 최근 가장 주목받는 논문을 선정하며, 본 논문은 피인용 86회로 분야 평균 대비 인용 영향력이 매우 높고 동년 상위 1%에 들어 선정되었다.
논문 요약
본 연구는 전통적인 객관식 평가가 지식 회상보다 인식에 의존하는 문제를 해결하고자 LLM을 활용한 자동 단답 채점 방식을 검토한다. GPT‑4와 Gemini 1.0 Pro를 이용해 12개 과목, 3개 언어에 걸친 2,288개의 학생 답안을 채점하였다. GPT‑4는 인간 평가자보다 낮은 점수를 부여했지만 오탐률이 낮았으며, Gemini는 인간과 유의미한 차이가 없었다. 두 모델 모두 인간 채점과 중간 정도의 일치도를 보였으며, GPT‑4는 완전 정답으로 판단된 답변에서 높은 정밀도를 나타냈다.
후속 연구설계에 활용하기
후속 연구에서는 GPT‑4와 Gemini의 채점 정확도를 종속변수로 삼아 교사 평가와의 상관관계를 검증하거나, TIPPS와 같은 교사 피드백 도구와 결합한 혼합 설계 연구를 설계할 수 있다.
핵심어
LLM자동 채점의료 교육단답 평가
실존 확인
이 논문은 OpenAlex에서 후보로 수집한 뒤, Crossref에 등록된 DOI와 제목 일치를 확인해 노출합니다.
SSRA가 문헌연구에서 인용 논문의 실재 여부를 검증하는 원칙과 같습니다.