OpenAI(오픈AI) 모델, 신약 개발 벤치마크 MedChemBench 점수 대폭 향상
GPT-6.2(지피티 6.2)가 신약 후보물질 추론에서 이전 세대 대비 유의미한 성능 개선을 보임. 다만 데이터 오염 가능성 등 벤치마크 해석 시 주의 필요.
요약
OpenAI의 차세대 모델인 GPT 6.2 Astra가 신약 개발 벤치마크인 MedChemBench에서 84.5%의 정확도를 기록하며 이전 세대인 GPT 5.6 Sol의 58% 대비 26.5%p 성능 향상을 보였다. MedChemBench는 논문과 특허 117건에서 추출한 99개의 실제 의약 화학 문제로 구성되어 있어 과학자들의 분자 선택 추론 능력을 평가한다. 신약 개발은 평균 10년 이상과 10억 달러 이상의 비용이 소요되기에, AI가 유망한 후보 물질을 빠르게 식별하는 것은 개발 시간과 비용을 획기적으로 줄일 수 있는 핵심 기술로 평가받는다. 다만 이번 결과는 OpenAI의 자체 모델만을 대상으로 수행되었으며, 학습 과정에서 데이터가 노출되었을 가능성이 존재해 추가 검증이 필요하다. 따라서 Claude나 Gemini 등 타 모델과의 비교 테스트를 통해 실질적인 AI 성능 우위를 판단할 수 있을 것으로 보인다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @cyrilXBT: OPENAI'S MODELS JUST WENT FROM 58% TO 84% ON A DRUG DISCOVERY BENCHMARK IN ONE GENERATION. It's called MedChemBench. 99 real medic
원문 보기 ↗