제15회 변호사시험 공개 검증
AI + JuriSupport 리서치 도구,
변호사시험 선택형 전 과목 만점
공법·민사법·형사법 총 150문항. 과목별 3회씩 실행한 도구 사용 조건 9회가 모두 만점이었습니다. 같은 모델에서 리서치 도구만 뗀 대조군은 한 번도 만점이 없었습니다.
검증 결과
모델의 성과가 아니라, 모델과 리서치 도구를 연결한 결과입니다
공법은 GPT-5.6 Sol, 민사법·형사법은 Claude Opus 5를 사용했습니다. 리서치 도구는 공개 법령·판례 데이터와 사무소가 보유한 교재를 로컬 DB로 만든 구성입니다. 비공개 특수 자료는 사용하지 않았습니다.
| 과목 | 모델 | 도구 사용 · 3회 | 도구 없음 · 대조군 3회 |
|---|---|---|---|
| 공법40문항 | GPT-5.6 Sol | 40/40 × 3 | 33, 34, 32 (평균 33/40) |
| 민사법70문항 | Claude Opus 5 | 70/70 × 3 | 65/70 × 3 |
| 형사법40문항 | Claude Opus 5 | 40/40 × 3 | 37, 35, 36/40 |
채점 기준: 법무부 공고 정답
도구 유·무 격차
도구 없는 대조군과 나란히 비교했습니다
같은 모델에서 법령·판례·교재 검색을 제거한 대조군은 전 과목에서 만점에 도달하지 못했습니다. 특히 공법은 평균 33/40에서 40/40으로 7문항이 개선됐습니다.
공법
GPT-5.6 Sol
민사법
Claude Opus 5
형사법
Claude Opus 5
검증 절차
믿어 달라는 주장이 아니라, 직접 검증할 수 있는 기록
유리한 결과만 골라 공개하지 않도록 실행 전에 절차를 정하고, 답안과 로그의 무결성을 봉인한 뒤 채점했습니다.
- 01
사전등록
모델·조건·실행 순서·채점 규칙과 조건 파일 해시를 실행 전에 고정했습니다.
- 02
정답표 차단·봉인
풀이 환경에서 정답표를 차단하고 답안·로그의 SHA-256 해시를 회차마다 봉인했습니다.
- 03
도구 유·무 교차 실행
과목별로 리서치 도구 사용 조건과 도구 없는 대조군을 각각 3회 실행했습니다.
- 04
자유 재생 암기 검증
문항을 주지 않고 정답·지문을 기억만으로 재생하도록 했으며 재생 주장은 0건이었습니다.
점수부터 검증 자료까지 공개했습니다
각 저장소에서 사전등록 문서, 회차별 결과, 봉인 해시, 재계산 스크립트와 상세 한계를 확인할 수 있습니다. 플러그인 저장소에는 도구 코드만 공개하며 교재 본문·교재DB·임베딩은 저작권을 고려해 공개하지 않습니다.
처음 설치하는 분을 위한 안내서결과 해석 시 유의사항
- 선택형(5지선다)에 한정된 결과이며 사례형·기록형 답안 작성 능력을 의미하지 않는다.
- 실제 시험의 시간 제한 조건과 다르다.
- 문항의 학습 데이터 노출 가능성은 자유 재생 암기 검증(재생 0건)으로 보완했다.
- 상세 한계는 각 GitHub 저장소에 명시.
* 자유 재생 암기 검증은 문항 지문을 제공하지 않은 격리 세션에서 정답 번호와 일부 지문을 기억만으로 재생하도록 요청한 검사입니다. 정답·지문 재생 주장은 0건이었습니다. 다만 이 검사는 지문을 보았을 때 기억이 보조하는 재인 수준의 노출 가능성까지 완전히 배제하지는 못합니다.
도입 문의
같은 리서치 인프라를 우리 사무소에
현재 사용하는 업무 환경과 보유 자료에 맞춰 필요한 리서치 도구만 연결하는 방법을 안내해 드립니다.