참고팁X
LlamaIndex, 복잡도 기반 페이지 파싱 최적화 'Parse Gateway' 출시
문서 복잡도별 경로를 최적화하여 RAG 비용 절감 및 정확도 향상. MCP 서버로도 활용 가능.
요약
LlamaIndex는 PDF 문서의 페이지별 복잡도에 따라 최적화된 파싱 방식을 적용하는 'Parse Gateway'를 출시했다. 이 서비스는 LiteParse의 'is_complex' 기능을 활용해 스캔된 표지, 표, 일반 텍스트, 이미지 등 페이지 특성을 자동으로 분석한다. 단순한 페이지는 무료로 내부 처리하고, 복잡도가 높은 페이지만 LlamaParse의 고성능 티어로 라우팅하여 비용 효율과 정확도를 동시에 확보한다. 별도의 수동 휴리스틱 설정 없이 파이프라인이 자동 최적화되며, MCP(Model Context Protocol) 서버로도 제공되어 AI 에이전트가 직접 파싱 티어를 선택할 수 있다. 결과적으로 문서 전체에 일괄적인 파싱 비용을 지불하던 기존 방식의 비효율성을 해결했다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @llama_index: Not every page in your PDF needs the same treatment. A scanned cover, a dense table, a clean text page, a figure-heavy diagram....
원문 보기 ↗