참고Reddit
오픈소스 실시간 팩트체크 도구 'InTruth' 업데이트: 모델 고도화 및 편향성 태깅 도입
Haiku에서 Sonnet으로의 모델 전환을 통해 팩트체크 정확도 개선. 팩트체크 에이전트 설계 및 모델 선정 기준 마련에 참고할 만한 오픈소스 사례.
요약
실시간 팩트체커 서비스인 InTruth가 최근 업데이트를 통해 성능과 기능을 개선했습니다. 기존 Haiku 모델 대신 Claude 3.5 Sonnet을 도입하여 소스별로 약 500단어의 정보를 바탕으로 더 정밀한 검증 결과를 제공합니다. Politifact, AP, FactCheck.org 등을 대상으로 테스트한 결과, 허위 진술 판별 정확도 89%, 검증 가치 있는 주장 커버리지 79~85%를 기록했으며, 참인 진술을 허위로 판단하는 오류는 없었습니다. 또한 신뢰도를 높이기 위해 소스 매체의 정치적 성향을 나타내는 편향성 태그(L/LC/C/RC/R) 기능을 추가했습니다. 현재 24,000명 이상의 사용자를 확보한 이 서비스는 16개 이상의 언어를 지원하며 오픈소스로 공개되어 있습니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 last update on politician factchecker
원문 보기 ↗