AI 지능 측정의 척도, 퍼즐: LLM은 어디서 틀리고 왜 중요한가

요약

퍼즐과 게임은 AI의 지능과 발전 속도를 측정하는 핵심 지표로 활용되어 왔으며, 머신러닝의 기원인 1959년 아서 사무엘의 체커 알고리즘부터 현재까지 이어지고 있다. 최근 AI의 퍼즐 해결 능력은 빠르게 향상되어, 2024년 말 컬럼비아 대학교 연구팀이 조사했을 때 뉴욕타임스 Connections 퍼즐 정답률이 18%에 불과했던 모델들이 2025년 초에는 거의 완벽한 수준에 도달했다. 그러나 여전히 AI는 고전적인 수수께끼에 미세한 변형이 가해지거나 시각적 퍼즐을 마주할 때 취약점을 드러내며 인간과 다른 인지적 한계를 보인다. 이러한 퍼즐 테스트는 모델의 성능 향상을 증명할 뿐만 아니라, 인간과 기계 간의 사고 방식 차이를 구체적으로 보여주는 유용한 도구가 된다. 따라서 AI가 특정 퍼즐에서 실패하거나 성공하는 지점을 분석하는 것은 현재 AI 기술의 강점과 약점을 파악하는 데 필수적이다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.