LlamaIndex, 문서 처리 파이프라인용 'LiteParse gRPC' 공개
REST API 외 gRPC 지원 추가로 마이크로서비스 환경에서의 문서 처리 성능과 확장성이 개선됨.
요약
LlamaIndex가 기존 REST 기반의 LiteParse에 이어 gRPC를 지원하는 'liteparse-grpc'를 새롭게 출시했다. 이번 업데이트를 통해 서비스 간 통신 효율성이 향상되었으며, npm 패키지나 Docker 이미지(ghcr.io/run-llama/liteparse-grpc)를 통해 간편하게 실행할 수 있다. liteparse-grpc는 PDF, 오피스 문서, 이미지를 JSON, 텍스트, 마크다운으로 파싱하고 PDF 페이지 스크린샷 렌더링 및 문서 복잡도 추정과 OCR 필요 여부 판단 기능을 제공한다. 또한 CLI 테스트 클라이언트, TypeScript 스텁, protobuf 정의가 포함되어 있어 Python, Go, Java 등 다양한 언어 환경에서 클라이언트 생성이 가능하다. 기존 REST 서버도 그대로 유지되며, 이번 추가 인터페이스 제공은 복잡한 마이크로서비스 기반 문서 파이프라인을 구축하는 팀의 유연성을 높이기 위한 조치이다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @llama_index: Document processing pipelines are often made up of multiple services: parsing → chunking → embeddings → storage. Until now, LitePa
원문 보기 ↗