참고X
LLM 이용 제한 변화 추적 프로젝트 'UsageBench' 화제
모델사들의 암묵적인 사용량 제한 변경 여부를 검증하려는 움직임. 모니터링 툴 등장.
요약
최근 Claude와 Codex 사용자들이 해당 모델의 사용량 제한이 별도의 고지 없이 줄어들고 있다고 의심하고 있으나 이를 검증할 방법이 부재한 상황이다. 이에 대해 BridgeBench는 사용량 제한 변동을 추적하는 서비스인 UsageBench를 개발하고 있다. 해당 서비스는 AI 모델의 5시간 및 주간 사용량 제한을 지속적으로 모니터링하여 데이터화한다. 이를 통해 AI 연구소가 사용자의 사용량 제한을 변경할 경우 이를 즉각적으로 확인할 수 있게 될 전망이다. 사용자는 평소와 다른 사용 제한을 경험할 경우 해당 플랫폼을 통해 변화 여부를 객관적으로 확인할 수 있게 된다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @bridgebench: A lot of people think Claude and Codex are silently cutting their usage limits. Right now there's no way to prove it. So we're bui
원문 보기 ↗