← promppy_ 실시간 AI 뉴스
참고Reddit

27B 오픈모델, 스키마 분할로 369필드 추출서 프런티어 모델 압도…85% vs 0%

대규모 구조화 출력은 스키마를 분할 호출해야 안정적. 추출 파이프라인 설계 시 참고.

요약

긴 문서에서 수백 개의 필드를 가진 대규모 구조화된 데이터를 추출할 때, 전체 JSON 스키마를 단일 호출로 요청하는 기존 방식은 모델의 출력 공간 부족 및 JSON 끊김 현상으로 인해 실패하기 쉽습니다. 공개 벤치마크인 ExtractBench(arXiv:2602.12247)의 369개 필드 SEC 공시 자료 테스트에서 단일 호출 방식을 사용한 6개의 프론티어 모델은 모두 성공률 0%를 기록했습니다. 이 문제를 해결하기 위해 스키마를 여러 호출로 분할하여 처리하는 'nfield' 방식이 제안되었습니다. nfield 방식을 적용한 결과, 27B 오픈 소스 모델이 동일한 테스트에서 85%의 높은 점수를 기록하며 모든 프론티어 모델을 능가하는 성과를 거두었습니다. 이 접근법은 대규모 추출 파이프라인 구축 시 흔히 마주하는 구조화된 출력 한계를 극복할 수 있는 실무적인 대안을 제시합니다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.

원문 제목 How I got a 27B open model to beat every frontier model at large-scale structured output (369-field extraction)

원문 보기 ↗

최신 뉴스

더 많은 실시간 AI 뉴스 →