Evaluation
성능 수치와 실패 기준을 함께 공개합니다
2026-08-10 KST 기준 Blind-120 평가 결과입니다. 16개 topic group을 포함하며, 이 수치는 답변 전체의 정답률이 아니라 retrieval과 applicability 단계의 지표입니다.
Category Recall@5PASS
96.25%기준 >= 95%정답 법령 범주가 최종 상위 5개 카테고리 후보 안에 포함되는 비율입니다.
Core Article Recall@20FAIL
94.7917%기준 >= 95%평가 데이터가 요구하는 핵심 조문이 최종 상위 20개 조문 후보 안에 포함되는 비율입니다.
Top-5 applicability precisionPASS
100%기준 >= 90%최상위 근거 후보 중 질문에 직접 또는 보조적으로 적용 가능한 것으로 평가된 비율입니다.
Wrong-domain exposurePASS
0%기준 <= 2%질문과 무관한 법률 분야의 근거가 최종 결과에 노출되는 비율을 추적합니다.
112/120은 무엇을 의미하나요?
112/120 gold case가 전체 case-level 진단 조건을 통과했습니다. 이 값도 법률 답변 자체의 정답률로 사용하지 않으며, retrieval 파이프라인을 비교하기 위한 diagnostic 결과입니다.
답변 합성 안전성 표본
12개 topic group의 답변 합성 검사에서 missing citation 0, unsupported legal claim 0을 기록했습니다. 이 검사는 해당 표본에서의 안전성 결과이며 모든 가능한 질문에서 오류가 없음을 보증하지 않습니다.