← 인사이트

AI Lab · No.37

AI 챗봇 고객 응대, 초기 스타트업의 도입 순서

AI 챗봇으로 고객 응대를 시작할 때 질문 정리, 근거 문서, 사람 연결 기준, 오답 관리 순서를 정리했습니다.

AI 창업 실습스타트업

AI 챗봇 고객 응대는 회사가 정한 근거 문서 안에서 자주 묻는 질문에 자동으로 답하고, 그 밖의 문의는 사람에게 연결하는 운영 방식입니다. 초기 스타트업은 도구를 선정하기 전에 질문 목록, 근거 문서, 사람 연결 기준을 먼저 정해야 합니다. 축적된 대화 기록은 고객 인사이트 분석에 다시 활용합니다.

Key Points · 핵심 요약
  1. 챗봇은 회사가 정한 근거 문서 안에서만 답하게 하고, 문서 범위 밖 질문은 상담원에게 연결합니다.
  2. 상담원 5,172명을 분석한 연구에서 AI 보조는 시간당 해결 건수를 평균 15% 높였습니다.
  3. 챗봇이 규정을 잘못 안내한 사건에서 회사의 책임을 인정한 결정이 이미 나왔습니다.

초기 스타트업은 AI 챗봇을 언제 도입해야 할까요?

같은 질문이 반복되기 시작할 때가 출발점입니다. 문의가 하루 몇 건이고 대부분 새로운 질문이라면 아직은 창업자가 직접 답하는 편이 효과적입니다.

직접 답하는 시기에 남긴 기록이 도입 준비 자료가 됩니다. 질문 원문, 발송한 답변, 응답 소요 시간을 표 한 장에 정리하면 그 표가 챗봇의 초기 설계 자료가 됩니다.

도구 선택은 마지막 순서입니다. 무엇에 답하고 무엇에 답하지 않을지 정하지 않은 챗봇은 설정은 쉬워도 실제 운영에서 응답 품질이 쉽게 떨어집니다.

해외 연구와 사례는 챗봇 운영에 대해 무엇을 말할까요?

브리뇰프슨, 리, 레이먼드(2025)는 고객지원 상담원 5,172명에게 생성형 AI 대화 보조 도구가 차례로 도입된 과정을 분석했습니다. 도구를 사용한 상담원은 시간당 해결 건수가 평균 15% 늘었습니다.

효과는 균일하지 않았습니다. 경험이 적은 상담원은 속도와 품질이 함께 올랐지만, 가장 숙련된 상담원은 속도가 조금 오르고 품질은 조금 내려갔습니다. 고객의 태도는 더 정중해졌고 관리자 연결 요청도 줄었습니다.

주목할 점은 운영 구조입니다. 이 연구의 AI는 고객에게 직접 답하지 않고 사람 상담원에게 답변을 제안했습니다. AI가 초안을 작성하고 사람이 확인하는 방식이 연구로 효과가 확인된 출발점입니다.

반대되는 사례도 있습니다. 2024년 캐나다의 한 민사분쟁 재판소가 다룬 사건에서, 한 항공사의 챗봇은 유족 할인 운임을 발권 후 90일 안에 소급 신청할 수 있다고 안내했습니다. 실제 규정은 소급 적용을 허용하지 않았습니다.

항공사는 챗봇이 독립적으로 책임을 지는 별도 주체라고 주장했지만 받아들여지지 않았습니다. 재판소는 정적인 웹페이지든 챗봇이든 회사가 자기 웹사이트의 모든 정보에 책임진다고 판단했습니다.

챗봇 답변에 정확한 규정 페이지 링크가 포함되어 있었다는 항변도 인정되지 않았습니다. 항공사에는 운임 차액 650.88캐나다달러에 이자와 비용을 더해 지급하라는 결정이 내려졌습니다.

챗봇 고객 응대는 어떤 순서로 시작할까요?

다섯 단계를 순서대로 진행합니다. 앞 단계의 결과물이 다음 단계의 입력이 되므로 순서를 건너뛰지 않습니다.

핵심은 2단계의 근거 문서 한정입니다. 문서에 없는 내용은 모른다고 답하고 사람 연결을 안내하라고 챗봇에 지시해 둡니다. 정책이 바뀌면 문서부터 수정하고 수정일을 문서 첫 줄에 기재합니다.

AI 챗봇 고객 응대 도입 5단계
단계수행 내용결과물
1. 질문 수집최근 문의를 같은 의미별로 분류하고 빈도순으로 정렬자주 묻는 질문 목록
2. 근거 문서 지정요금, 환불, 이용 방법처럼 답의 근거가 되는 문서만 연결챗봇이 참조하는 문서 목록과 갱신 담당자
3. 상담원 연결 기준 수립사람에게 연결할 문의 유형과 연결 안내 문구 작성상담원 연결 조건표
4. 금지 답변 지정챗봇이 단정하면 안 되는 내용과 대체 문장 정리금지 답변 목록
5. 기록 점검매주 대화 기록을 읽고 틀린 답과 답하지 못한 질문 분류문서 보완 목록

상담원 연결 기준과 금지 답변은 어떻게 정할까요?

상담원 연결 기준은 금전, 약속, 감정의 세 가지 유형을 중심으로 정합니다. 환불과 결제 오류처럼 금전이 오가는 문의, 예외를 약속해야 하는 문의, 화가 난 고객의 문의는 사람이 직접 응대합니다.

금지 답변 목록은 챗봇이 단정하면 안 되는 문장을 모은 것입니다. 앞의 항공사 사례처럼 규정의 예외를 안내하는 답이 가장 위험하므로 목록 맨 위에 둡니다.

  • 고객이 사람과의 상담을 원하면 바로 연결합니다.
  • 같은 질문이 두 번 넘게 반복되면 연결합니다.
  • 근거 문서에서 답을 찾지 못하면 추측하지 않고 연결합니다.
금지 답변과 대체 답변
유형챗봇이 해서는 안 되는 답변대체 답변
환불·보상조건과 관계없이 환불된다고 단정규정 문서를 안내하고 담당자 연결
예외 처리규정에 없는 할인이나 기한 연장 약속예외는 담당자가 확인해 답한다고 안내
일정확정되지 않은 출시일이나 배송일 안내문서에 확정된 일정만 안내
기능개발 예정 기능을 현재 제공되는 것처럼 설명현재 기능만 안내하고 요청으로 기록
개인정보대화창에서 카드번호 같은 민감 정보 요청민감 정보는 입력하지 말라고 먼저 안내

챗봇 대화 기록은 고객 인사이트로 어떻게 활용할까요?

대화 기록은 고객이 직접 작성한 질문 데이터입니다. 인터뷰에서는 질문하지 않으면 드러나지 않는 표현이 여기에는 그대로 기록됩니다.

매주 기록을 세 유형으로 분류합니다. 맞게 답한 질문, 틀리게 답한 질문, 문서가 없어 답하지 못한 질문입니다. 앞의 두 유형은 운영 개선에, 마지막 유형은 제품과 안내 문구 개선에 활용합니다.

답하지 못한 질문이 한 주제에 집중되면 제품에서 보완이 필요한 부분일 가능성이 큽니다. 가격 질문이 많으면 요금 안내가, 사용법 질문이 많으면 첫 화면 안내가 부족하다는 신호입니다. 분석 전에는 이름과 연락처를 삭제합니다.

근거 문서 기반 응답 원칙

챗봇의 품질은 모델의 성능보다 회사가 정한 근거 문서와 상담원 연결 기준에서 결정됩니다.

자주 묻는 질문

Q.AI 챗봇을 도입하면 고객 응대 인력을 줄일 수 있나요?

초기에는 사람을 줄이기보다 반복 질문 응대에 소요되던 시간을 줄이는 데 의미가 있습니다. 연구에서도 AI는 상담원을 대체하기보다 상담원의 답변을 보조하는 방식으로 성과를 냈습니다. 금전과 약속이 관련된 문의는 계속 사람이 응대합니다.

Q.챗봇이 틀린 답을 하면 회사가 책임져야 하나요?

해외 결정 사례에서는 회사가 책임을 졌습니다. 챗봇이 별도 주체라는 주장은 받아들여지지 않았습니다. 나라마다 법은 다르지만 고객은 챗봇의 안내를 회사의 안내로 받아들인다고 보고 운영해야 합니다.

Q.챗봇이 읽을 근거 문서는 어떻게 준비하나요?

질문과 답변을 한 쌍씩 정리한 문서가 가장 관리하기 쉽습니다. 요금, 환불, 이용 방법처럼 주제별로 구분하고 문서마다 최종 수정일과 담당자를 기재합니다. 지난 공지나 초안 문서는 연결하지 않습니다.

Q.대화 기록 점검은 얼마나 자주 해야 하나요?

도입 첫 달은 매주 점검하는 편이 좋습니다. 전체를 읽기보다 사람에게 연결된 대화와 고객이 불만을 드러낸 대화부터 확인합니다. 같은 오답이 두 번 나오면 그 주에 문서를 수정합니다.

Q.고객에게 챗봇이라는 사실을 알려야 하나요?

첫 메시지에서 밝히는 편이 안전합니다. 자동 응답이라는 점과 사람에게 연결하는 방법을 함께 안내하면 고객이 처음부터 적절한 기대를 갖게 됩니다.

참고 자료

큐케이파트너스창업교육, AI 교육, BM 고도화, IR 덱 제작, 데모데이 운영을 하는 스타트업 그로스 파트너입니다. 창업 현장에서 반복되는 질문을 연구와 심사·교육 경험으로 정리합니다.

프로그램 설계가 필요하신가요?

랜딩페이지 반응과 타깃고객 설문으로 수요를 확인하는 고객검증 프로그램을 운영합니다.