개요
사용자는 자세한 티켓 데이터 CSV를 내보내 평가된 티켓의 맞춤형 검토를 진행할 수 있습니다. 이 기능은 티켓 탭에서 사용할 수 있으며 평가된 티켓에만 적용 가능합니다. 평가되지 않은 티켓은 마에스트로QA에서 내보내기가 불가능합니다.
이 가이드는 내보내기를 설정하는 방법과 제공되는 데이터를 더 자세하게 설명합니다.
원 점수 내보내기 설정하기
1. 평가된 티켓의 원 점수를 내보내는 가장 쉬운 방법은 티켓 탭을 통해서 입니다.
여기서 원 점수를 두 가지 방식으로 내보낼 수 있습니다:
첫 번째 방식: 티켓을 직접 체크한 후 “점수 내보내기” 선택
두 번째 방식: 검색 필터 적용 후 “점수 내보내기” 선택
보정 점수를 포함시키고자 한다면 내보내기 전 “보정 점수 포함”을 반드시 선택해야 합니다.
2. 팝업 창의 서식을 작성합니다. 여기서 내보내기 이름을 수정하거나, 포함/제외시킬 상담원을 선택하고, 포함시킬 티켓 기간을 선택하거나(두 번째 방식의 경우), 내보내기를 받을 사람을 선택할 수 있습니다. 필요 시 발송되는 이메일에 메세지를 추가할 수도 있습니다.
3. “CSV파일로 보내기”를 선택합니다
이메일에서 전송된 파일을 확인하거나(위 “이메일 수신자”에 포함된 경우) “내보낸 파일” 탭에서 확인할 수 있습니다.
4. 이메일이나 “내보낸 파일” 탭에서 “다운로드”를 선택합니다.
선택 시 4개의 각기 다른 파일을 포함한 폴더가 다운로드 된다. 자세한 사항은 아래 내용을 참고해주세요.
내보낸 파일의 결과물 이해하기
티켓을 내보낸 후 여러 CSV 파일이 나타납니다. 이는 gradable_id에서 통합 가능하며 각 CSV가 포함하는 내용은 아래에서 찾을 수 있습니다:
Individual_answers.csv
열: 각 열은 내보내기에 포함된 모든 평가된 티켓의 기준(질문) 하나를 나타낸다.
행: 15개의 행은 여러 정보를 포함하며 다음과 같다:
gradable_id: 티켓 ID
agent_id: 각 상담원의 고유 ID 넘버
agent_name: 상담원 이름
rubric_id: ID string associated with each rubric 각 평가루브릭과 관련된 ID 문자열
rubric_name: 평가루브릭 생성 시 사용된 평가루브릭 이름
question_id: 각 질문과 관련된 ID 문자열
question: 해당 질문
answer_label: 평가자가 선택한 답변
feedback_answer_label: 질문의 피드백 섹션에서 체크박스나 드롭다운 기능이 사용된다면 그 결과물이 이곳에 나타납니다.
question_score: 제공된 답변에 부여된 포인트 총점. N/A 답변의 경우 빈칸으로 남아있습니다. 자동실패 질문의 경우 선택 시 0이 나타납니다.
max_question_score: 해당 질문에 제공 가능한 최대 포인트(자동실패 질문의 경우 값은 -100)
comment: 각 질문 다음의 피드백 섹션에 포함된 자유로운 양식의 코멘트
date_graded: 티켓 점수가 저장된 날짜와 시간
grader: 티켓 평가자
grade_type: “평가” 혹은 “점수 보정”. 이는 평가자가 티켓 점수를 메길 시 “평가 시작”과 “점수 보정 시작” 중 어떤 것을 선택했는지에 따라 달라집니다.
ticket_created_at: 해당 점수가 제공된 티켓이 생성된 날짜와 시간
section_id: 본 질문을 포함하는 섹션과 관련된 ID 문자열
section_name: 본 질문을 포함하는 섹션의 이름
유의사항: 행 대부분은 Section_scores와 Rubric_scores 파일에 포함되어 있습니다. 세 파일 간 차이가 있는 행만 아래에 설명합니다.
Section_scores.csv
열: 각 열은 내보내기에 포함된 모든 평가된 티켓의 섹션을 나타냅니다.
행: 12개의 행은 여러 정보를 포함하며 다음과 같습니다:
section_id:각 섹션과 관련된 ID 문자열
section_name: 섹션 이름
section_score: 해당 섹션 내 올바른 답변 비율. 자동실패 섹션은 선택 시 -100으로 나타난다. N/A 답변은 빈칸으로 나타난다.
max_section_score: 최대 합산 퍼센티지 (모든 열이 100)
Rubric_scores.csv
열: 각 열은 내보내기에 포함된 모든 평가된 티켓의 평가템플릿을 나타냅니다. 따라서 본 파일의 각 열은 하나의 티켓을 나타냅니다.
행: 11개의 행은 여러 정보를 포함하며 다음과 같습니다:
rubric_score: 최종 평가루브릭 점수
max_rubric_score: 최대 합산 퍼센티지 (모든 열이 100)
comment: 티켓 하단에 남겨진 일반 코멘트
Annotation.csv
열: 각 열은 하나의 주석을 나타냅니다. 각 티켓 당 여러 개의 주석이 달려있거나 없을 수도 있습니다.
행: 11개의 행은 여러 정보를 포함하며 다음과 같다:
annotation_id: 각각의 주석을 구분하기 위한 임의 문자열
selected_text: 선택된 텍스트
comment: 선택된 텍스트와 관련된 평가자가 남긴 코멘트