Krea2에서 멀티 캐릭터 LoRA를 제어하는 '바운딩 박스' 프롬프트 기법
여러 LoRA를 동시에 사용할 때 발생하는 간섭을 최소화하는 파이프라인. 복합 이미지 생성 시 제어력을 높일 수 있음.
요약
K2Lab은 Krea2에서 특정 영역에 바운딩 박스(bbox) 형태의 프롬프팅을 적용해 캐릭터 LoRA를 개별적으로 제어할 수 있도록 돕는 연구 프로젝트입니다. 기존 ComfyUI 노드 팩 구현의 어려움을 해결하기 위해 Comfy 백엔드를 활용한 PySide 기반 독립형 구현 방식을 채택했습니다. 현재 개발 초기 단계이나 연구 목적으로 활용 가능하며, 최소 8GB VRAM 및 24GB RAM 환경에서 구동되도록 튜닝할 수 있습니다. 개발자는 RX9060XT GPU 환경을 기준으로 최적화했으며, 향후 RunPod API 연동 기능도 준비 중입니다. Krea2 환경에서 여러 캐릭터 LoRA 간의 간섭(leakage) 현상을 방지하고 세밀한 제어를 원하는 사용자들에게 새로운 방향성을 제시할 것으로 기대됩니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 K2Lab: Standalone(ish) Krea2 bbox style prompting and lora containment
원문 보기 ↗