신호 행간 읽기 — 법률 시뮬레이션의 행동적 사실성 모델링·평가

요약

한 연구가 법률 시뮬레이션의 행동적 사실성을 모델링하고 평가하기 위한 제어 가능한 법률 페르소나 기반 증언녹취 시뮬레이터 'WitnessSim'을 소개한다. 저자들은 증언녹취 훈련이 변호사에게 역동적인 증인 행동에 대응할 능력을 요구하지만, 기존 법률 AI 평가는 주로 사실 정확성이나 추론, 응답 수준의 타당성에만 초점을 맞추고 행동적 사실성은 다루지 않는다고 지적한다. 이들은 행동적 사실성과 교육적 유용성을 분리해서 보는 평가 프레임워크를 도입한다. 논문은 시뮬레이터를 대상으로 한 적대적 테스트를 통해 사실성을 평가한다. 이 프레임워크는 법률 훈련용 AI 도구의 신뢰성을 검증하는 새로운 기준이 될 수 있다.