순서가 있습니다. 포털 넷(연구방·지식센터·커뮤니티·아카데미)을 먼저 담고,
SSRA 는 맨 나중에 담아 주세요. SSRA 를 먼저 담으면 나머지가 그 안에 포함된 것으로
잡혀 따로 담기지 않습니다. 아이콘도 담을 차례대로 놓았습니다 — 왼쪽부터 차례로 누르시면 됩니다.
Evaluating LLMs on Italian through multi-prompt: the Evalita-LLM benchmark
Bernardo Magnini, Roberto Zanoli, Michele Resta 외 · Language Resources and Evaluation · 2026년 · 조회 18
왜 이 논문인가 — 선정 기준
NEW PAPER · 최근 발표된 참신한 논문 — 게재일 기준 최신 + 정상 등재 저널
2026-11 발표 · 게재 1일차 · Language Resources and Evaluation
신규 슬롯(New Paper)으로 최신(2026년) 발표 논문이며, 다중 프롬프트라는 참신한 접근과 FWCI 7.4, 동년 상위 2% 인용량을 근거로 선정되었다.
논문 요약
본 논문은 이탈리아어 과제에 특화된 다중 프롬프트 벤치마크 Evalita-LLM을 제안한다. 각 과제마다 여러 개의 프롬프트를 선정·검증하는 반복적 방법론을 도입해 모델이 특정 프롬프트에 민감해지는 문제를 완화한다. 10개의 원어 이탈리아어 과제와 객관식·생성형 과제를 혼합하여 실제 사용 상황에 가까운 평가를 가능하게 한다. 실험 결과는 여러 최신 LLM들의 성능과 프롬프트 안정성을 정량적으로 보여준다.
후속 연구설계에 활용하기
다중 프롬프트 선정 및 안정성 지표를 다른 언어·도메인에 적용해 benchmark를 구축하거나, 프롬프트 변동성 변수를 활용한 성능 분석 설계에 활용할 수 있다.
핵심어
이탈리아어대형언어모델다중프롬프트벤치마크
실존 확인
이 논문은 OpenAlex에서 후보로 수집한 뒤, Crossref에 등록된 DOI와 제목 일치를 확인해 노출합니다.
SSRA가 문헌연구에서 인용 논문의 실재 여부를 검증하는 원칙과 같습니다.