AI KNOWLEDGE · AI Ops & 운영

프롬프트 A/B 테스트

두 가지 프롬프트 버전의 성능을 통계적으로 비교. ①지표 정의(정확도, 관련성, 사용자 만족) ②샘플 크기 계산(통계적 유의성) ③무작위 배정 ④결과 분석. 직관보다 데이터로 프롬프트를 개선합니다. LangSmith Experiments가 자동화를 지원합니다.