← promppy_ 실시간 AI 뉴스
참고팁Reddit

‘당신은 전문가입니다’ 프롬프트, 2026년 최신 모델에서도 효과 없다

6.3만 회의 호출을 통해 확인된 연구 결과. 불필요한 프롬프트 접두사를 제거해 토큰을 절약하고 간결한 지시문에 집중해야 함.

요약

최근 2026년형 LLM 7종을 대상으로 프롬프트 시작 문구인 'You are an expert'의 효과를 검증한 실험 결과, 해당 문구가 성능 향상에 거의 영향을 미치지 않는 것으로 나타났다. 이번 연구는 2024년 EMNLP에 발표된 'When 'A Helpful Assistant' Is Not Really Helpful' 논문을 바탕으로 MMLU 질문 63,000건을 활용해 재검증한 것이다. 실험 비용은 10.11달러가 소요되었으며, 추론(reasoning) 모드 활성화 여부와 관계없이 모델들이 역할을 부여받았을 때 더 나은 결과를 보이지 않았다. 이는 이전 세대 모델에서 확인되었던 프롬프트 엔지니어링 기법이 최신 모델에서도 여전히 효과가 없음을 시사한다. 작성자는 'You are an expert'와 같은 역할 부여가 성능 개선에 실질적인 도움을 주지 못한다는 점을 확인했다고 밝혔다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.

원문 제목 I always started prompts with "You are an expert…". I tested it on 7 models from 2026 with 63,000 calls. It didn't help.

원문 보기 ↗

광고

promppy는 한국 AI 실무자를 위한 실시간 AI 뉴스 터미널입니다.

15분마다 속보·중요·팁 자동 수집 · 한국어 요약 제공

실시간 피드 보기 →RSS 구독

관련 뉴스