참고Reddit
NotebookLM, 소스 외부 질문에 응답하는 환각 현상 보고
제공된 문서에 없는 내용에 대해 모델이 환각을 일으키는 사례가 공유되었습니다. RAG 구축 시 주의가 필요합니다.
요약
구글의 AI 노트 서비스인 NotebookLM이 소스 파일에 포함되지 않은 내용을 답변하는 현상이 사용자들 사이에서 제기되고 있다. 한 사용자는 프랑스 혁명에 관한 위키백과 문서를 소스로 업로드한 뒤, 해당 내용에 없는 스페인의 참전 여부를 질문하자 NotebookLM이 관련 정보를 스스로 생성해 답변했다고 보고했다. 이는 NotebookLM이 제공된 소스에만 기반하여 답변해야 한다는 기존 기대와 달리, 외부 지식을 참조하거나 모델의 학습 데이터를 활용해 답변하는 것으로 보인다. 사용자는 NotebookLM이 엄격하게 소스 기반으로만 답변하는지, 아니면 외부 정보 활용이 예상된 동작인지에 대해 의문을 제기했다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 NotebookLM Is Answering Non-Source-Related-Questions ?
원문 보기 ↗