Jev 확률 기반 체스 데모 공개: 선택지형 응답의 실시간 신뢰성 검증
Jev 모델의 보정된 확률(calibrated probabilities)을 실제 게임 인터페이스로 시각화한 프로젝트입니다. 모델의 의사결정 방식 확인에 유용합니다.
요약
Reddit의 r/LLMDevs 커뮤니티에서 Jev 모델의 확률적 정확성을 검증하기 위한 'Jev Chess(jevchess.com)' 프로젝트가 공개되었습니다. 이 체스 사이트는 모든 합법적인 수를 단일 선택지 문제로 제시하여 모델이 규칙에 어긋나는 수를 두는 것을 원천적으로 차단합니다. LLM의 출력은 텍스트가 아닌 각 수의 확률을 시각화하여 보드에 표시하며, 밝은 색일수록 모델이 선택할 확률이 높은 수를 의미합니다. 체스 말의 수 계산이나 이전 오프닝 기록은 코드 내부에서 처리하여 상태 값으로 입력하는 방식을 채택했습니다. 여러 사용자가 하나의 체스판에서 공유하여 플레이하거나 개인용 보드를 생성할 수 있는 기능도 제공합니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 I built a shared chessboard where everyone plays one game against Jev - every legal move is a typed option, so illegal moves are impossible
원문 보기 ↗