참고Reddit
FrontierMath 벤치마크, 전문가 예상보다 2년 빠르게 돌파
수학적 난제 해결 속도가 가속화됨. 모델의 추론 능력 발전을 평가하는 벤치마크 기준이 빠르게 변하고 있음을 시사.
원문 제목 From Dec 2024: Fields medalists Terence Tao, Timothy Gowers, and Richard Borcherds characterized [FrontierMath] Tier 3 as “exceptionally challenging,” with Tao predicting it will “resist AIs for several years.” They were fully saturated <2 years later.
원문 보기 ↗