참고Reddit
METR 연구: AI 모델 추론 시간과 성능 효율의 상관관계 분석
추론 시간을 3분에서 30분으로 늘리는 것이 30분에서 5시간으로 늘리는 것보다 성능 향상 효율이 높음. 에이전트 추론 예산 설계 시 참고.
원문 제목 228 tasks, 26 models: METR's time horizon curve is nearly flat from 2-30 min, so 3 min -> 30 min is a much smaller step than 30 min -> 5 h
원문 보기 ↗