중요OpenAI
OpenAI(오픈AI) 수석 과학자, 모델 비교 지표로 'Perplexity(퍼플렉시티)' 표준화 제안
벤치마크 점수 외에 손실값(perplexity) 기반 평가 논의 확산 가능. 모델 선정 기준 재점검 필요.
요약
OpenAI의 최고 과학자 Jakub Pachocki는 현대 AI 발전의 핵심이 대규모 데이터셋을 통한 압축기(predictor) 학습에 있다고 분석했습니다. 그는 AI 모델 개발자 간의 비교와 공통 안전 표준 수립을 위해 퍼플렉서티(perplexity) 또는 교차 엔트로피 손실(cross-entropy loss)을 핵심 지표로 활용할 것을 제안했습니다. OpenAI는 업계 전반의 공유 과학적 기반 구축을 위해 내부의 사전 학습 진행 상황과 퍼플렉서티 측정치를 투명하게 공개하기로 결정했습니다. 경쟁사들에 자사의 현재 위치를 노출할 위험이 있지만, 산업 전반의 공통된 안전 조치를 마련하는 것이 더 시급하다는 판단입니다. 이번 조치는 AI 발전의 속도를 이해하고 체계적인 안전 기준을 수립하기 위한 첫 단계가 될 것으로 기대됩니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Perplexity and Intelligence
원문 보기 ↗