AI 상담을 공개한 첫 주에 확인할 것들

설정 화면의 미리보기와 고객 사이트는 다릅니다. 실제 설치한 페이지에서 위젯을 열고 첫 질문과 이메일을 입력해보세요. 답변을 기다리는 동안 무엇이 보이는지, 다른 페이지로 이동했다 돌아와도 대화를 찾을 수 있는지 확인합니다.

한 번은 휴대폰으로 같은 일을 해보세요. 키보드가 입력창을 가리지 않는지, 긴 답변을 읽을 수 있는지, 닫기와 다시 열기가 자연스러운지 살펴봅니다. 고객이 가장 많이 방문하는 페이지부터 확인하면 점검 범위를 줄일 수 있습니다.

버튼을 눌렀는데 창이 뜨지 않는 것, 전송한 글이 입력창에 남아 있는 것, AI의 답변이 늦게 시작되는 것은 서로 다른 문제입니다. 모두 “채팅이 느리다”로 기록하면 무엇을 고쳐야 할지 알기 어렵습니다.

위젯 열기, 내 메시지 표시, 답변 시작, 답변 완료를 구분해서 기록하세요. 네트워크가 느려도 전송 중이라는 상태는 바로 알 수 있어야 합니다. 전송 실패를 성공처럼 보여주지 않는지, 재시도할 때 같은 메시지가 두 번 생기지 않는지도 함께 확인합니다.

이메일 주소에 공백이나 잘못된 기호를 넣어보세요. “대화를 시작하지 못했습니다”만 표시되면 고객은 무엇을 바꿔야 하는지 알 수 없습니다. 입력란 가까이에서 형식 문제를 알려주고, 작성한 문의는 그대로 남아 있어야 합니다.

이름이 길거나 문의를 여러 줄로 작성한 경우도 확인해보세요. 한국어 입력 중 Enter를 누르는 상황과 모바일 전송 버튼도 직접 써보면 좋습니다. 오류가 없는 경로만 확인하면 고객이 실제로 겪는 작은 막힘을 놓치기 쉽습니다.

아래는 운영을 확인하기 위한 예시 질문입니다. 제품의 정책에 맞는 질문으로 바꿔 사용하세요. 잘 답하는지 확인할 질문과 답을 확정하면 안 되는 질문을 함께 준비하는 것이 핵심입니다.

질문과 기대 결과를 함께 남겨두면 자료를 수정한 뒤에도 같은 기준으로 비교할 수 있습니다. 처음부터 많은 문항을 만들기보다 자주 받는 질문과 중요한 예외부터 시작해보세요.

사람 연결 안내가 나왔다면 그다음은 팀의 업무입니다. 알림이 도착하는지, 링크에서 해당 대화를 찾을 수 있는지, 앞서 나눈 내용을 읽고 답장할 수 있는지 확인하세요. 고객 화면에 담당자 답장이 표시되는 순간까지가 한 번의 점검입니다.

Deyo에서는 Slack과 이메일로 알림을 받고 웹 수신함에서 고객에게 답장합니다. 여러 명이 운영한다면 누가 확인할지 미리 정해두세요. 알림 수신자가 여럿이라는 이유만으로 응대 책임자가 정해지는 것은 아닙니다.

업무시간이 끝난 뒤의 안내도 따로 확인해야 합니다. 바로 답할 사람이 없을 때 고객에게 어떤 메시지가 보이는지, 남긴 연락처로 후속 답변을 확인할 수 있는지 살펴보세요. 팀 내부에서는 다음 업무 시작 때 미처 답하지 못한 문의를 누가 확인할지 정해둡니다.

첫 며칠 동안은 낮은 평가를 받거나 담당자에게 연결된 대화를 우선 읽어보세요. 답변이 틀렸는지, 맞지만 설명이 어려웠는지, 고객이 원한 것이 안내가 아닌 실제 처리였는지 구분합니다. 서로 다른 문제를 AI 성능 하나로 묶지 않는 것이 좋습니다.

고객이 쓴 표현도 남겨두세요. 내부에서는 기능 이름으로 부르는 일을 고객은 전혀 다른 말로 설명할 수 있습니다. 이 표현은 다음 상담 테스트와 도움말 제목을 다듬는 데 바로 쓸 수 있습니다.

문제를 기록할 때는 질문, 기대한 결과, 실제 결과, 발생한 화면을 함께 적으면 충분합니다. “답변이 이상함”만 남기는 것보다 다음 확인이 쉬워집니다. 고객 개인정보를 별도 문서로 불필요하게 복사하지 말고, 접근 권한이 있는 원래 대화를 찾아볼 수 있도록 관리하세요.

대화가 몇 건 없을 때는 한 건의 실패만으로 비율이 크게 달라집니다. AI 응답이 있었다는 사실도 고객 문제가 해결됐다는 뜻은 아닙니다. 전체 대화량, 담당자 연결, 실제 답변 내용을 함께 봐야 어떤 변화인지 이해할 수 있습니다.

Deyo의 사용량과 인사이트는 검토할 대화를 찾는 출발점으로 활용하세요. 내부 상담 테스트와 고객 위젯 대화가 같은 성과로 섞이지 않았는지도 확인합니다. 첫 주의 목표는 큰 성공 수치를 만드는 것보다 다음에 무엇을 바꿀지 아는 것입니다.

잘못된 안내가 반복됐다면 기준 문서나 Q&A를 고치고, 고객이 입력 단계에서 멈췄다면 화면 안내를 살펴보세요. 연결 후 답장이 늦었다면 문서를 더 넣는 대신 담당자와 알림 흐름을 점검해야 합니다. 발견한 문제에 맞는 수정을 선택하는 것이 중요합니다.

수정한 뒤에는 처음에 남겨둔 질문으로 다시 시험합니다. 답변과 출처가 맞는지, 사람 연결은 여전히 동작하는지 확인하고 변경 내용을 짧게 기록하세요. 이렇게 한 주씩 반복하면 기능을 많이 켜는 것보다 고객에게 필요한 상담 경험을 안정적으로 만들어갈 수 있습니다.