Google DeepMind-Kaggle 벤치마크 대회, 수상작의 'AI Slop' 논란 발생

요약

구글 딥마인드와 캐글(Kaggle)이 공동 주최한 'Measuring Progress Toward AGI - Cognitive Abilities' 챌린지의 우승작 선정 과정에서 논란이 제기되었다. 이번 챌린지는 인지과학 기반의 새로운 AI 벤치마크 설계를 목표로 했으며, 총 2만 5천 달러의 상금이 걸려 있었다. 하지만 한 Reddit 사용자는 우승작이 단순히 무의미한 숫자 생성과 근거 없는 주장을 나열한 결과물에 불과하다고 지적했다. 분석에 따르면 해당 출품작은 LLM의 의견 변화를 측정하려는 원래 의도와 달리, 규정된 제출 형식을 10배 이상 초과한 비논리적인 데이터 뭉치로 확인되었다. 이러한 지적은 심사 과정에서 제대로 된 검증이 이루어지지 않았다는 비판으로 이어지며 AI 커뮤니티 내에서 논쟁을 불러일으키고 있다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.