DeepSeek-V4-Flash 신규 모델, Agent Arena 순위 21위 기록
실제 에이전트 환경에서 이전 버전 대비 성능 개선 확인. 에이전트 태스크 모델 선정 시 참고.
요약
딥시크(DeepSeek)가 공개한 신규 모델 'DeepSeek-V4-Flash-20260731 (High)'이 에이전트 아레나(Agent Arena) 순위에서 종합 21위, 오픈소스 모델 중 3위를 기록했습니다. 이번 모델은 약 12,500개의 실사용 에이전트 세션을 바탕으로 평가되었으며, 이전 모델인 'DeepSeek-V4-Flash' 대비 13계단, 'DeepSeek-V4-Pro' 대비 6계단 높은 순위를 보였습니다. 전체 성과 개선폭은 1.98%로, 특히 'Confirmed Success(확인된 성공)' 지표에서 6.99% 향상된 강점을 보였습니다. 다만, 사용자 피드백에 따른 'Steerability(조정 가능성)' 지표는 2.31% 하락하며 다소 약세를 나타냈습니다. 이 평가는 사용자들의 실제 과제 수행 데이터를 바탕으로 Confirmed Success, Praise vs. Complaint, Steerability, Bash Recovery, Tool Hallucination 등 5개 지표를 기준으로 분석되었습니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @arena: DeepSeek-V4-Flash-20260731 (High) by @deepseek_ai landed in Agent Arena at #21 overall (+1.98% net-improvement), and among open so
원문 보기 ↗