참고X
AI 코드 및 연구 작업 성공률, 가속화되는 성능 개선 곡선
AI 모델이 복잡한 작업을 80% 성공률로 처리하기까지 걸리는 시간이 급격히 단축됨. 최신 모델의 개발 생산성 변화를 직시할 필요.
요약
AI가 코딩 및 ML 연구 작업을 80% 이상의 성공률로 수행할 수 있는 작업 길이가 가속화되고 있다. 2019년부터 2025년까지는 평균 7개월마다 이 성능이 두 배가 되었으나, 2024년부터 2026년 초까지는 3.3개월로 단축되었다. 특히 Opus 4.5 이후에는 그 주기가 1.7개월로 더욱 짧아지며 발전 속도가 빨라졌다. 실제 성능을 비교하면 6개월 전 Mythos Preview 모델은 3.1시간 분량의 작업을 처리할 수 있었던 반면, 현재 내부 모델 4는 약 38시간 분량의 작업을 수행할 수 있는 것으로 추정된다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @haider1: who would've thought the curve would bend this hard? length of coding and ML research tasks AI can do at 80% success: 2019-25: eve
원문 보기 ↗