참고팁Reddit
HTML 응답 스킬 vs 직접 작성: 토큰 비용 및 성능 비교
특정 작업에서 도구(Skill) 사용이 토큰 절감으로 직결되지 않을 수 있음을 시사. API 사용 시 비용 효율성을 직접 검증한 사례.
요약
최근 Reddit에서 'answer with HTML' 기술을 활용해 답변을 생성하는 방식이 Claude에 직접 HTML 작성을 요청하는 것보다 비용 효율적인지 검증한 결과가 공유되었습니다. Claude Code와 Sonnet 3.5를 활용한 실험에서, 해당 기술을 사용했을 때 출력 토큰은 68% 감소하고 처리 시간도 약 41초 단축되었습니다. 하지만 모델 호출 횟수가 5회로 증가하고 전체 맥락 파악을 위해 더 많은 토큰(159K)을 소비함에 따라 총비용은 직접 작성하는 것과 거의 동일한 것으로 나타났습니다. 또한, 직접 작성한 답변이 더 명확했으며 기술을 사용한 결과물은 다이어그램 등에서 정보의 정확성이 떨어지는 문제가 발견되었습니다. 결과적으로 단순한 토큰 절감보다는 답변의 품질과 워크플로우 효율성을 고려한 선택이 필요합니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Does an "answer with HTML" skill actually save tokens? I tested it against plain Claude, and the price came out the same
원문 보기 ↗