Fable 작성 법률 인용 분류기, 별도 재현서 그럴듯한 위조에 50%대
Legora CTO Jacob Lauritzen은 X에서 Fable이 작성한 법률 인용 분류기의 정확도를 97.8%, 8,192개 라벨로 훈련한 모델은 94.6%로 제시했습니다. Graham Syfert의 별도 재현에서는 Fable이 새로 작성한 분류기가 무작위 위조에는 92.5%를 기록했지만, 실제 권·쪽수 범위에 맞춘 위조에는 50.5%, 숫자 한 자리 오기에는 55.7%였습니다. 원래 실험과 재현은 데이터·위조 생성 방식·분류기 구조가 다른 조건에서 진행됐습니다.