# 프롬프트 평가(Prompt Evaluation) 입문: 왜 "한 번 잘 됐어요"는 위험한가
프롬프트 평가(Prompt Evaluation) 입문: 왜 "한 번 잘 됐어요"는 위험한가LLM 애플리케이션을 한 번이라도 만들어본 분이라면 다 공감하실 거예요. 로컬에서는 완벽하게 돌던 프롬프트가, 사용자에게 풀어놓는 순간 별별 희한한 입력에 박살나는 경험. 저도 수없이 겪었습니다.문제는 우리가 프롬프트를 만든 뒤 "몇 번 테스트해보고 괜찮아 보이면 배포" 하는 패턴에 빠지기 쉽다는 점이에요. 하지만 신뢰할 수 있는 AI 서비스를 운영하려면 한 단계 더 나아가야 합니다. 바로 프롬프트 평가(Prompt Evaluation) 입니다.이 글에서는 프롬프트 엔지니어링과 프롬프트 평가의 차이, 프롬프트를 작성한 뒤 우리가 흔히 선택하는 3가지 경로, 그리고 왜 평가 우선(Evaluation-First) 접근 ..
AI
2026. 5. 8. 23:45