LLM 회의록 요약 시 할루시네이션 방지하는 구조화 프롬프트 프레임워크
불명확한 회의록에서 데드라인이나 담당자를 지어내는 LLM의 습성을 태깅 방식으로 제어하는 유용한 프롬프트 기법.
요약
Reddit의 한 사용자가 회의록을 요약할 때 LLM이 임의로 마감일이나 담당자를 지어내는 문제를 해결하는 구조화된 프롬프트 프레임워크를 공개했다. 기존 LLM은 불완전한 회의록에서 모호한 정보를 추측하는 경향이 있는데, 이 프레임워크는 엄격한 규칙을 적용하여 누락되거나 불분명한 데이터를 특정 마커로 강제 표기한다. 예를 들어 담당자가 없으면 [BRAK OSOBY], 마감일 미정이면 [BRAK TERMINU], 모호한 정보는 [DO WERYFIKACJI] 등으로 표시하도록 설정했다. 또한 변경된 합의 사항은 [ZMIANA USTALENIA], 해결되지 않은 갈등은 [SPRZECZNOŚĆ]라는 태그를 사용한다. 작성자는 폴란드어 기반으로 제작했으나, 영어 등 다른 언어로 마커를 번역하여 쉽게 활용할 수 있다고 밝혔다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 I built a structured prompt framework that stops LLMs from inventing deadlines and assignees in meeting transcripts
원문 보기 ↗