내부 평가 기록
2026 15회 변호사시험 선택형
앱 기본 조건에 가깝게 문제 본문과 선택지만 입력해 평가한 내부 벤치마크입니다. Google Search OFF와 ON 조건 모두 150문항 중 149문항을 맞혔습니다.
총괄 결과
Google Search OFF와 Google Search ON은 같은 문항을 서로 다른 조건으로 독립 실행한 비교군입니다. 대표 수치는 합산하지 않고 조건별 결과로만 표시합니다.
149/150
조건별 정답률 99.3%
과목과 문항을 선택해 Gemini의 실제 최종 응답, 선택 번호, 정답 여부, citation 요약을 확인할 수 있습니다.
실제 응답 보기과목별 결과
| 과목 | 문항 수 | Google Search OFF | Google Search ON | 해석 |
|---|---|---|---|---|
| 형사법 | 40 | 39/40 (97.5%) | 39/40 (97.5%) | 총점은 같지만 오답 문항은 서로 달랐습니다. |
| 공법 | 40 | 40/40 (100.0%) | 40/40 (100.0%) | 두 조건 모두 40문항 전부 정답입니다. |
| 민사법 | 70 | 70/70 (100.0%) | 70/70 (100.0%) | 두 조건 모두 70문항 전부 정답입니다. |
| 합계 | 150 | 149/150 (99.3%) | 149/150 (99.3%) | 두 조건의 총점은 같습니다. |
평가 방법
문제 본문과 선택지만 입력하고, 응답 본문을 사람이 판독해 선택번호를 기록한 뒤 정답표와 비교했습니다.
- 모델
- gemini-3.5-flash
- 처리 방식
- flex
조건 해석
- 모델은 gemini-3.5-flash 하나만 사용했습니다.
- 처리 방식은 flex 하나만 사용했습니다.
- 데이터스토어는 법령, 행정규칙, 판례, 헌재, 결정례, 해석례 기본 묶음을 사용했습니다.
- Google Search OFF와 ON은 같은 150문항을 두 조건으로 독립 실행한 비교군입니다.
평가 한계와 주의
- 단일 회차의 선택형 문제만 평가했습니다.
- 주관식, 사례형 서술, 실제 상담형 질문은 평가 대상이 아닙니다.
- 선택번호는 자동 파싱이 아니라 사람이 응답 본문을 읽고 수동 입력했습니다.
- 이 결과는 법률 상담 정확도나 시험 합격 가능성을 보장하지 않습니다.