← promppy_ 실시간 AI 뉴스
참고X

Gemini 3.8 Flash, LMSYS 벤치마크에서 Opus 5 추월

코딩 및 멀티턴 성능 대폭 향상. 고성능 모델의 API 비용 절감을 고려할 때 최우선 교체 대상.

요약

구글 딥마인드가 새로운 모델인 Gemini 3.8 Flash (High)를 공개하며 Agent, Text, Code Arena에 정식 도입했다. Agent Arena에서 이 모델은 5.94%의 순 개선율을 기록하며 14위에 올랐고, 이전 버전인 Gemini 3.7 Flash (High)의 32위 대비 큰 폭의 성능 향상을 보여주었다. Text Arena에서는 1494점으로 전체 7위를 기록하며 Claude Opus 5 (High)를 앞질렀고, 특히 글쓰기 및 언어, 다중 턴, 긴 질의, 코딩 등 주요 카테고리에서 순위가 대폭 상승했다. Code Arena: WebDev에서도 1567점으로 18위에 안착하며 연구소별 최고 성능 모델 랭킹에서 구글 딥마인드의 입지를 공고히 했다. 이번 모델은 사용자 반응 측면에서 칭찬 비율과 성공 확인 지표가 각각 14.78%, 11.12% 개선되는 등 실질적인 사용자 경험 개선을 입증했다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.

원문 제목 @arena: Gemini 3.8 Flash (High) by @GoogleDeepMind is here! It just debuted across Agent Arena, Text Arena, and Code Arena: WebDev. In Age

원문 보기 ↗
다음 뉴스 →

중요Palo Alto Networks, IT 헬프데스크 자동화 AI 에이전트 스타트업 'Console' 5억 달러에 인수

창업 2년·기업가치 1.6억 달러 스타트업이 5억 달러에. 에이전트 IT 자동화 M&A 가열.

promppy는 한국 AI 실무자를 위한 실시간 AI 뉴스 터미널입니다.

15분마다 속보·중요·팁 자동 수집 · 한국어 요약 제공

실시간 피드 보기 →RSS 구독

관련 뉴스

최신 뉴스