신호 논문, 텍스트 임베딩으로 문항보정 대체 가능성 검증

요약

한 프리프린트가 다차원 문항반응이론(IRT)에서 전통적으로 쓰이는 문항보정 방식의 대안을 검증했다. 다차원 IRT는 보통 변별도나 역치 같은 문항 파라미터를 대규모 인간 응답 표본에서 추정해 사용한다. 이 연구는 그런 파라미터의 방향성 로딩값을 사람의 응답 없이도, 사전학습된 문장 임베딩만으로 문항 텍스트에서 곧바로 복원할 수 있는지를 검증했다. 즉 초기 단계의 인간 기반 보정 절차를 건너뛸 수 있는지가 핵심 질문이다. 이 방법은 공개된 IPIP 빅파이브 성격 데이터셋으로 검증됐다. 이 데이터셋은 응답자 19,719명이 50개 문항에 답한 자료로 구성돼 있다.