참고팁Hacker News
Three.js 코딩 작업에 최적화된 모델 및 하네스 조합 벤치마크
프롬프트 1종으로 10개 모델 조합을 테스트한 실전 사례로, 코딩 에이전트 구축 시 모델 선택 및 프롬프트 최적화의 참고 자료로 활용 가능.
요약
한 개발자가 동일한 Three.js 작업 프롬프트를 사용하여 10개의 모델 및 하니스 조합의 성능을 테스트한 결과를 공개했다. 테스트 프롬프트는 드론, 경고등, 활주로, 안개 효과를 포함한 단일 페이지 HTML 파일을 생성하는 과제로 설정되었다. GLM 5.3 Flash Max 모델을 포함한 모든 실험은 캐시된 입력 토큰을 반영하여 수행되었으며, 생성된 전체 토큰 수와 추론 데이터를 측정했다. DSH 어댑터는 별도의 추론 카운트를 보고하지 않으며, DSH 소요 시간은 턴 사이의 대기 시간을 제외한 두 턴의 활성 시간을 합산하여 기록되었다. 각 모델과 하니스 조합에 따른 도구 오류 및 가용성 데이터도 함께 기록되어 성능 비교의 지표로 활용되었다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 I tested 10 model/harness combinations on the same Three.js task
원문 보기 ↗