Airbnb의 AI 에이전트 구축 프로세스: 추출·임베딩·클러스터링 워크플로우
비정형 데이터를 구조화된 데이터로 변환해 에이전트 성능을 높이는 구체적인 파이프라인 사례.
요약
Airbnb는 수개월이 걸리던 고객 지원 데이터 분석 작업을 며칠 만에 완료할 수 있는 AI 에이전트 구축 프레임워크를 공개했다. 핵심 로직은 비정형 텍스트를 처리하는 '추출(Extract) -> 임베딩(Embed) -> 클러스터링(Cluster)' 루프를 따르며, 단순히 텍스트를 임베딩하는 대신 모델이 정의한 라벨을 임베딩하여 그룹화의 의미를 높였다. 특히 클러스터의 중심이 아닌 경계값을 분석하고, 프롬프트 튜닝, 하드 예제 마이닝, 대조적 라벨링(Contrastive labelling)을 통해 지속적으로 분류기를 개선하는 리파인먼트 루프를 적용했다. 이 과정에서 모든 프롬프트, 샘플, 임계값 변경 사항을 기록하여 데이터의 재현성과 비교 가능성을 확보했다. 현재 이 시스템은 사내 엔지니어링 조직을 넘어 다양한 부서에서 활용되며 실무 효율성을 크게 높이고 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @undefinedKi: Airbnb just published the AI agent setup their own teams run. Task that took months now takes days. They needed to map what their
원문 보기 ↗