참고팁Reddit
모델별 JSON 출력 준수율 비교: Claude(클로드) vs ChatGPT(챗GPT) vs Gemini(제미나이)
장기 컨텍스트 실행 시 Claude(클로드)가 포맷 유지에 가장 강점. 구조화된 출력 작업 시 모델 선정 참고.
요약
Reddit의 r/PromptEngineering 커뮤니티에서 Claude, ChatGPT, Gemini를 대상으로 동일한 엄격한 JSON 형식 프롬프트를 반복 테스트한 결과가 공유되었습니다. 실무 테스트 결과, Claude는 다회차 문맥에서도 가장 일관되게 형식을 유지하는 성능을 보였습니다. ChatGPT는 첫 번째 턴에서는 강력한 성능을 발휘하나, 턴이 진행될수록 형식이 틀어지는 경향이 확인되었습니다. Gemini는 속도는 빠르지만 긴 컨텍스트에서는 필드가 누락되는 문제가 있어 문맥 끝부분에 스키마를 재반복해야 하는 것으로 나타났습니다. 이번 비교는 공식 벤치마크가 아닌 일상적인 업무 환경에서의 관찰 결과이며, 각 모델의 실제 지시 이행 능력에 대한 사용자들의 경험 공유가 이어지고 있습니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Same prompt, three models: who actually follows a strict format?
원문 보기 ↗