홈으로 돌아가기
공식 웹사이트 방문하기
DeepEval 딥이밸 프로덕션 LLM 유닛 테스트 및 환각 평가 프레임워크
공식 서비스 바로가기
서비스 상세 소개
DeepEval 딥이밸 프로덕션 LLM 유닛 테스트 및 환각 평가 프레임워크: RAG 시스템과 LLM 애플리케이션의 환각 현상, 사실 충실도, 답변 관련성을 소프트웨어 유닛 테스트처럼 자동 채점하고 CI CD에 통합하는 도구입니다.
DeepEval은 LLM 애플리케이션의 품질을 정량적 지표로 지속 평가하는 프로덕션 레벨 평가 프레임워크입니다. Pytest 환경과 자연스럽게 결합하여 빌드 파이프라인에서 프롬프트나 모델 변경 시 발생하는 회귀 오류를 방지합니다. G-Eval, 답변 충실도 Faithfulness, 문맥 관련성 Contextual Relevancy 등 학계 표준 지표를 코드로 정의하고 시각화 대시보드로 추세를 분석합니다.
핵심 기능 목록
Pytest 문법과 100% 호환되어 기존 CI CD 빌드 파이프라인에 즉시 테스트 스위트 주입
G-Eval, 환각도, 답변 사실 충실도, 유해성 등 14가지 이상의 표준 평가 메트릭 지원
합성 테스트 데이터셋 자동 생성기로 실서비스 투입 전 가상 질의응답 수백 건 생성
로컬 CLI 채점 결과와 과거 테스트 이력을 시각화하는 Confident AI 웹 대시보드
