LLM 리뷰 품질 높이는 프롬프트: 문제점 나열 대신 '검증 방법'을 요구하라

요약

AI 모델에게 코드나 문서 검토를 요청할 때 단순히 문제점 나열을 요구하면 모든 이슈가 동일한 어조로 제시되어 중요도 파악이 어렵다는 한계가 있다. 이를 개선하기 위해 문제점 나열 대신 구체적인 검증 방식을 포함한 구조화된 프롬프트를 사용하는 방법이 제안되었다. 모델에게 각 문제에 대해 한 문장 요약, 근거가 되는 원문, 최저 비용으로 검증할 수 있는 방법, 보이지 않는 전제 조건, 무시할 경우 발생하는 문제점을 각각 제시하도록 요청해야 한다. 또한 심각도순으로 순위를 매기지 말고 발견한 순서대로 나열하도록 설정하면 모델의 판단 과정을 더 투명하게 확인할 수 있다. 이러한 프롬프트 변경은 모델이 내놓은 결과물의 맥락과 실제 위험성을 사용자가 더 정확하게 평가하는 데 도움을 준다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.