AI가 약한 리드를 가져가자 콜센터 상담원 성약이 줄었다

중국의 한 온라인 보험 중개사가 2024년 8월 가장 약한 영업 리드 대부분을 AI 음성 에이전트에 넘겼다. 사람 상담원에게는 더 좋은 리드가 남았지만, 그들이 맡은 구매 의향 높은 리드의 성약률은 4.4%에서 3.7%로 떨어졌다. 통화 기록 56만 7,090건을 분석한 워킹페이퍼는 이 하락의 원인을, 다음에 더 좋은 통화가 올 것이라고 기대하게 된 상담원이 지금 들고 있는 통화를 다루는 방식에서 찾는다.

2024년 8월 28일에 바뀐 것

[사실] 이 회사는 데이터 계약에 따라 익명으로 처리됐으며, 온라인 보험 가입 도중 이탈한 고객에게 전화를 건다. 결제 화면까지 간 고객은 「핫」 리드, 그 전에 이탈한 고객은 「콜드」 리드로 분류된다. 2024년 8월 28일 배분 규칙이 바뀌어 콜드 리드는 기본적으로 AI 음성 에이전트가 맡고, 핫 리드는 사람이 우선권을 갖게 됐다. AI가 처리하는 콜드 리드 비중은 25% 미만에서 60% 이상으로 뛰었다.

[사실] 급여, 스크립트, 교육, 평가는 그대로였다. 상담원 소득의 대부분은 본인이 직접 체결한 계약의 수수료이고, 자신이 돌려보낸 리드가 나중에 동료를 통해 계약되면 아무것도 받지 못한다.

세 가지 발견

1. 좋은 리드는 하루 초반에 몰렸다. [사실] 같은 날 평균과 비교했을 때, 사람이 받은 통화가 핫 리드일 확률은 상담원의 하루 첫 세 통화에서 23.4%포인트, 네 번째부터 여섯 번째 통화에서 15.7%포인트 올랐고, 81~120번째 통화에서는 변화가 없었다.
2. 성약은 바로 그 구간에서 줄었다. [사실] 첫 세 통화의 성약률은 4.5%포인트, 다음 세 통화는 2.5%포인트 낮아졌고, 근무 중반에는 변화가 없었으며, 근무 막바지에는 3.4%포인트 올랐다.
3. 상담원은 더 빨리 손을 놓았다. [사실] 첫 세 통화에서 상담원이 성약하지 못한 리드를 공용 대기열로 돌려보내는 비율이 8.1%포인트 높아졌고, 계속 붙든 통화도 약 13% 짧아졌다. 돌려보낸 리드는 이후 붙든 리드의 약 1.9배 비율로 계약됐다. 상담원이 버린 것은 약한 고객이 아니라 좋은 고객이었다.

저자들은 이 패턴을 탐색 이론으로 설명한다. 다음에 더 좋은 리드가 올 것으로 기대되면 지금 손에 든 리드는 상대적으로 못해 보이고, 그 당김은 근무 시간이 많이 남아 있을 때 가장 세다. [추정] 저자들의 회계 모형에서 리드 순서가 좋아진 효과는 핫 리드 수율을 0.58% 높였고, 상담원 행동 변화는 17.6% 낮췄다. 행동 효과가 기계적 이득의 약 30배다. 하루 단위로 본 전체 성과의 인과 추정치는 통계적으로 0과 구별되지 않는다.

회사 전체 수치

[사실] 전후 60일 구간에서 사람의 통화는 31.8% 줄고 AI 통화는 351% 늘었다. 사람 통화 50건당 성약 건수는 6.3% 늘어 생산성이 오른 것처럼 보이지만, 이는 성약보다 사람 통화량이 더 빨리 줄었기 때문이다. 저자들의 계산으로는 하루 물량 기준으로 사람이 핫 리드 성약을 하루 약 50.5건 잃었고, AI는 콜드 리드에서 약 7.7건을 되찾았다.

[추정] 두 수치를 나누면 AI가 1건을 더할 때마다 사람의 성약 약 6.6건이 사라진 셈이다(우리 계산).

해당 직업

[주장] 저자들은 작업자가 공용 대기열에서 일을 받고, 작업을 내려놓을 수 있으며, 그 뒤에도 일이 더 올 것으로 기대하는 곳이라면 같은 반응이 나타날 것으로 본다. 예로 보험금 청구 처리, 사기 심사, 콘텐츠 검수, 고객 문의 분류를 든다. 우리 사이트에서 가장 가까운 직업은 텔레마케터, 고객 서비스 상담원, 보험 판매원이다.

준비할 것

• 하루 첫 통화를 기록해 본다. 손실은 첫 세 통화에서 여섯 통화 사이에 몰려 있었다. 오전 리드에 얼마나 오래 머무는지, 몇 건을 돌려보내는지 적어 두면 이 패턴이 내게도 나타나는지 직접 확인할 수 있다.
• 어떤 리드를 받는지뿐 아니라 언제 받는지를 묻는다. 저자들의 모형에서는 핫 리드를 내보내는 리듬을 AI 도입 이전으로 되돌리면 통화당 성약이 약 13.5%(부트스트랩 구간 10.5~16.6%) 늘어난다. 좋은 리드를 근무 시간 전체에 나눠 배분하는 것은 팀장에게 요청할 수 있는 변화다.
• 「사람 통화당 산출」 수치를 따져 본다. 이 회사에서는 그 수치가 오르는 동안 사람이 맡은 일의 성약률은 내려갔다.

한계

연구 대상은 한 회사, 한 번의 배분 규칙 변경, 그리고 변경 전후 약 60일이다. 추정치는 절대 수준이 아니라 같은 날 평균 대비 통화 순번별 변화를 나타내고, 통화 길이는 노력의 대리 지표이며, 비용 모형은 인과 추정이 아니라 보정 모형이다. 두 구간 사이 상담원 근무일은 7,492일에서 5,561일로 줄었다(26%, 우리 계산). 저자들은 이직이 크지 않았고 변경 시점에 상담원 특성의 단절이 없었다고 보고한다. 이 논문은 동료 심사를 거치지 않은 워킹페이퍼다.

출처

• Xinyu Fu, Shulong Luo, Narayan Ramasubbu, Peng Shen, Xincheng Wang, Yucheng Wang, "When Better Opportunities Backfire: Service Worker Responses to Parallel AI Deployment in Customer Acquisition", arXiv:2610.25603, 2026년 10월: https://arxiv.org/abs/2610.25603

이 분석에 대해

이 글은 부록을 포함한 논문 전문을 바탕으로 AI의 도움을 받아 작성했다. 저자 6명 중 1명은 베이징의 Waterdrop Research Institute 소속이며, 연구 대상 회사는 가명으로만 등장한다. 논문은 CC BY-NC-ND 4.0으로 공개됐다. [추정] 표시 수치는 본문에 적은 대로 저자들의 보정 모형이거나 논문 수치를 바탕으로 한 우리 계산이다.