LlamaIndex 데이터: 문서 추출 비용과 성능은 비례하지 않는다

요약

LlamaIndex는 370개의 기업 문서와 14개의 최첨단 시스템을 대상으로 문서 추출 성능과 비용의 상관관계를 분석했다. 실험 결과, 문서 추출 비용이 높다고 해서 반드시 정확도가 더 높은 것은 아닌 것으로 나타났다. 특히 'Agentic Plus' 모델은 2위 시스템보다 3분의 1 미만의 비용으로 가장 높은 정확도를 기록했다. 또한 'Agentic & Cost Effective' 계열의 시스템들이 훨씬 비싼 비용을 요구하는 시스템들보다 일관되게 우수한 성능을 보였다. 이번 데이터는 기업들이 문서 추출 도구를 선택할 때 비용 효율성을 보다 면밀히 따져야 함을 시사한다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.