Qwen 3.8 27B vs Claude Opus 5: C 코드 변환 작업 성능 비교

요약

최근 한 레딧 사용자가 프로시저럴 슈팅 게임인 2.1MB 분량의 C 코드를 HTML 및 three.js 환경으로 포팅하는 작업을 통해 신규 모델 qwen3.8:27b와 Claude 3.5 Sonnet(Opus 5)의 성능을 비교했다. 테스트는 39,000줄에 달하는 코드를 처리하는 과정에서 에이전트가 파일을 탐색하고 핵심 로직을 파악하는 능력을 검증하는 방식으로 진행되었다. RTX 6000 Pro 96GB 환경에서 FP8 양자화를 적용한 qwen3.8:27b 모델들은 1시간 40분에서 4시간 18분가량 소요되었으나 모두 결과물이 좋지 않았다. 반면 클라우드 기반의 Claude 3.5 Sonnet은 21분 만에 1,759줄의 코드를 작성하며 훨씬 안정적인 포팅 결과를 보여주었다. 이번 실험은 대규모 컨텍스트를 다루는 복잡한 코딩 작업에서 아직 로컬 모델이 클라우드 최상위 모델을 대체하기에는 성능상 한계가 있음을 시사한다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.