참고X
오픈 웨이트 모델 'Inkling', ARC-AGI 벤치마크 1위 달성
추론 능력 핵심 지표인 ARC-AGI에서 SOTA급 성능 기록. 오픈 소스/웨이트 모델 선택지 확장.
요약
Thinky Machines에서 개발한 인공지능 모델 Inkling이 ARC-AGI 평가에서 오픈 웨이트 모델 중 최고 점수를 기록하며 새로운 성능 기준을 제시했습니다. Inkling은 ARC-AGI-1 데이터셋에서 79.5%의 정확도를 달성하며 태스크당 0.30달러의 비용 효율성을 보였습니다. 더 고난도 평가인 ARC-AGI-2에서는 36.5%의 정확도를 기록했으며, 이 경우 태스크당 비용은 0.64달러로 측정되었습니다. 이번 결과는 ARC Prize가 공식 검증한 수치로, 현재 공개된 오픈 웨이트 모델 중 가장 높은 평가 점수입니다. 추론 및 문제 해결 능력을 측정하는 ARC-AGI 벤치마크 분야에서 Inkling의 실용적 활용 가능성이 주목받고 있습니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @arcprize: Inkling from @thinkymachines on ARC-AGI (Verified) - ARC-AGI-2: 36.5%, $0.64/task - ARC-AGI-1: 79.5%, $0.30/task As of today, Inkl
원문 보기 ↗