참고팁Reddit
Jev 모델 실측 결과: NASA 케플러 데이터 분석 실험
범용 모델이 아닌 특수 목적 에이전트 모델이 특정 데이터 셋에서 어떤 방식으로 동작하는지 확인할 수 있는 실증 사례.
요약
한 개발자가 라우팅 및 지원 업무 외 용도로 NASA의 Kepler Objects of Interest 데이터 8,054개를 활용해 AI 모델 Jev의 성능을 테스트했다. 데이터당 21개의 측정값을 바탕으로 확인된 행성, 허위 양성, 후보자 중 하나를 선택하게 한 결과, Jev의 종합 정확도는 54.2%로 단순 3-rule 베이스라인(64.4%)보다 낮았다. 그러나 허위 양성 판별에서는 89.6%의 정확도를 보여 뛰어난 성능을 입증했다. 확인된 행성 분류에서는 데이터셋 내 2,731개 중 8개만을 정확히 맞혔고 나머지는 대부분 후보자로 분류하는 보수적인 성향을 보였다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 I tested Jev on NASA Kepler signals
원문 보기 ↗