Korean Hallucination Resistance Leaderboard · 5개 전문 도메인 × 10개 환각 유형 · 4지선다 객관 채점
| # | 모델 | 환각 저항 | 비고 |
|---|---|---|---|
| 1 | Darwin-398B-JGOS VIDRAFT | 80.6% | baseline · 평가 진행중(8,000) |
| · | EXAONE · Kanana · A.X · Trillion · Midm · Solar | 평가 예정 | K-AI 공개모델 |
| · | GPT · Claude · Qwen · GLM | 평가 예정 | 글로벌 비교 |
각 모델에게 질문 + 4지선다(정답 1 + 그럴듯한 환각 오답 3)를 제시하고 정답을 고르게 하여, 환각 선택지에 속지 않고 정답을 고르는 비율을 측정합니다. 정답은 Claude로 검수·교정해 신뢰성을 확보했으며, 모든 모델은 동일 문항·동일 조건(greedy)으로 평가됩니다.
도메인: 법령 · 특허 · 행정 · 의료 · 금융 | 환각 유형 10종: 용어왜곡 · 수치/날짜 오류 · 사실 날조 · 조항 왜곡 · 근거없는 추론 · 존댓말/반말 역전 · 한자어/신조어 혼재 · 출처 날조 · 과잉 일반화 · 맥락 붕괴
지니젠AI · NIPA 첨단 GPU 활용 지원사업 · LLM X-RAY Hallucination 모듈