DATUMO Eval
AI 에이전트 평가, 대화 로그 하나로 충분합니다.
복잡한 설정도, 평가 기준도 필요없어요. 단 4단계로 확인하세요.
1. 로그 업로드 · 직접→2–4. 기준 생성 · 채점 · 리포트 · 자동
1 직접
로그 업로드
2 자동
점검 기준 자동 생성
3 자동
대화 자동 채점
4 자동
틀린 이유 + 고칠 방법
실제 제품 화면 · 샘플 데이터
방금 본 실수, 왜 지금까지 아무도 몰랐을까요?
AI 에이전트는 멀쩡히 돌아가도,
틀린 답을 할 수 있습니다.
모니터링도, 범용 벤치마크도 놓치는 실패를 이제 잡아낼 수 있습니다.
쇼핑몰 AI 챗봇
Q. 4인 가족이 쓸 냉장고 추천해 주세요.
A. B사 OO 양문형 냉장고를 추천드려요.
통신사 AI 챗봇
Q. 약정이 남았는데 지금 해지하면 위약금 있나요?
A. 위약금은 없습니다.
사내 지식 검색 AI
Q. 식대 지원 금액이 바뀌었나요?
A. 월 15만 원입니다.
※ 기존 모니터링의 취약점
범용 평가의 한계·운영 리소스 문제·개선까지 연결되지 않는 문제
예시 대화 · 실제 기업·제품과 무관한 가상의 사례입니다
가입 없이 바로 · 약 1분
이렇게 평가됩니다.
샘플을 선택하고 평가 기준 생성부터 오류 분석과 개선 제안까지 직접 확인할 수 있어요.
‘내 로그 업로드’는 12월 정식 오픈 후 이용할 수 있어요.
이런 질문에 답할 수 있게 됩니다
AI 서비스 기획 · 운영
- Q“우리 챗봇이 정책대로 답하고 있나?”
- Q“출시 전에 어디가 제일 위험하지?”
AI · ML 개발
- Q“프롬프트에서 무엇부터 고쳐야 하지?”
- Q“실패가 특정 유형에 몰려 있나?”
QA · 평가 담당
- Q“평가 기준을 어디서부터 만들지?”
- Q“지금 쓰는 체크리스트가 빠뜨린 건 없나?”
오직 사전예약자만을 위한 혜택
크레딧 최대 33만원 , 놓치지 마세요.
사전예약만 해도 ₩65,000, 초대할수록 혜택이 더 커집니다!
사전예약
₩65,000
초대 링크로 이메일 등록
+₩25,000
친구 1명 추천
+₩25,000
친구 3명 추천
+₩65,000
친구 5명 추천
+₩150,000
추천 보상은 단계별로 누적됩니다.
자주 묻는 질문
AI 에이전트가 왜 실패하는지, 어떻게 알 수 있나요?
고객과 나눈 대화를 기준에 따라 채점해, 어디서 틀리고 있는지 찾는 작업입니다. 일반 모니터링은 ‘응답했는가’를 보고, 평가는 ‘제대로 답했는가’를 봅니다.
어떤 데이터가 필요한가요?
AI 에이전트의 대화 로그 파일 하나면 됩니다.
· 파일 형식: CSV 또는 XLSX
· 컬럼: User Input(고객 질문), Application Output(AI 답변) 2개
· 로그 수: 50~500건
· 이름·연락처·주소·주문번호 등 개인정보는 마스킹한 데이터
잘 답한 대화와 부족한 대화가 섞여 있으면 더 정확하게 평가돼요. 환불 조건·상담원 연결 기준 같은 서비스 정책을 함께 적어주면(선택, 최대 2,000자) 우리 서비스 규칙까지 반영한 기준이 만들어집니다.
로그가 없어도 써볼 수 있나요?
네. 이 페이지의 샘플 체험에서 전체 흐름을 바로 확인할 수 있습니다.
로그를 형식에 맞게 만들기 어려우면요?
업로드 화면의 Copy 버튼을 누르면 업로드 조건과 로그 예시가 복사돼요. 이걸 AI에게 붙여넣어 형식에 맞는 로그를 만들 수 있습니다. 업로드하면 빈 컬럼·중복 컬럼·로그 수 부족 같은 형식 문제를 바로 검사해 알려드려요.
업로드한 데이터는 어떻게 관리되나요?
업로드한 대화 로그는 평가 실행과 결과 제공, 서비스 품질 개선을 위해 저장·처리됩니다. 자세한 내용은 개인정보처리방침과 서비스 이용약관에서 확인하실 수 있습니다.