웨비나 요약: 텍스트 챗봇에 사람 같은 목소리 입히기

챗 에이전트는 이제 기업 소프트웨어의 기본 요소가 되었습니다. 대부분의 회사가 이미 챗봇을 보유하거나 개발 중입니다. 하지만 사용자가 직접 말하고 싶어할 때 어떻게 해야 할지 고민하는 곳은 많지 않습니다.

사우디아라비아 최대 슈퍼앱 중 하나인 Nana는 다른 길을 선택했습니다. 비하인드 더 에이전트: Nana가 AI Agents로 고객 경험을 혁신하는 방법에서 Nana의 고객 경험 책임자인 Karim Mustafa가 AI 에이전트를 지원 업무 전반에 도입한 과정과, 그 결과 팀, 비용, 품질 점수에 어떤 변화가 있었는지 공유했습니다.

이제 대부분의 팀이 고민하는 것은 음성을 추가할지 여부가 아니라, 이미 잘 작동하는 시스템을 다시 만들지 않고 어떻게 음성을 추가할지입니다.

음성으로 구축하는 것이 생각보다 어려운 이유

Nana는 2016년 사우디아라비아에서 식료품 배달 서비스로 시작했습니다. 10여 년 동안 세탁, 세차, 음식 배달 등 다양한 서비스를 아우르는 슈퍼앱으로 성장했습니다. 제품이 커질수록 고객 문의도 급증했고, 팀은 수요를 맞추기 위해 54명의 지원 인력이 교대 근무를 해야 했습니다.

전환점은 Nana가 FAQ 챗봇과 기본 채팅 흐름에서 ElevenLabs 기반의 진정한 프론트엔드 AI 에이전트로 전환하면서 찾아왔습니다. 이 에이전트는 Nana 앱 내에서 고객과 직접 대화하며, 문제 해결, 문의 응답, 주문 추적, 필요 시 이관까지 모두 처리합니다. 품질도 즉각적이고 일관됐습니다.

비즈니스 효과는 매우 컸습니다:

1. Nana는 고객 지원 비용을 85% 절감했습니다
2. 응답 시간이 몇 초로 단축되었습니다

기술적으로는 동작하지만, 대화로서는 어색해집니다.

또 다른 문제는 맥락입니다. 매 턴마다 대화 기록을 LLM에 전달하는 것은 필요하지만 충분하지 않습니다. 같은 말이라도 어떻게 말하느냐에 따라 의미가 달라집니다. 예를 들어, 안도하며 "괜찮아요"라고 말하는 것과 짜증 섞인 "괜찮아요"는 텍스트로는 같지만 실제로는 전혀 다른 상호작용입니다. 이런 부분을 무시하는 음성 시스템은 아무리 모델이 좋아도 어딘가 어색하게 들릴 수밖에 없습니다.

엔지니어링 부담도 있습니다. 자체적으로 음성 오케스트레이션을 관리하는 팀은 턴테이킹 로직, 끼어들기 처리, 지연 시간 프로파일링 등을 계속 관리해야 합니다. 한 번 만들고 끝나는 일이 아닙니다.

보이스 AI는 이 세 가지를 모두 해결합니다. 항상 일관된 답변을 제공하고, 새로운 정보에 즉시 적응하며, 어떤 통화량이든 유연하게 확장할 수 있습니다.

기존 에이전트에 음성을 추가하는 방법

가장 깔끔한 방법은 듀얼 WebSocket 아키텍처입니다.

Karim은 팀의 문제 해결 방식이 어떻게 달라졌는지 설명했습니다. 새로운 운영 과제가 생기면, 이제는 몇 명이 필요한지가 아니라, 얼마나 빨리 에이전트를 만들어 대응할 수 있는지가 기본 질문이 되었습니다.

남은 지원팀원들에게는 고정 근무와 AI 중심 KPI에 맞춘 유연 근무 중 선택권이 주어졌고, 모두가 유연 근무를 선택했습니다.

Urban Company는 현재 세 가지 주요 분야에서 보이스 AI를 운영 중입니다:

1. 멀티모달 지원. Nana는 고객들이 전화뿐 아니라 채팅도 원한다는 점을 발견했습니다. 고객 행동에 맞는 채널을 제공하니 도입이 쉬워지고 결과도 빨라졌습니다.
2. 기술뿐 아니라 프롬프트 품질에 집중하세요.AI는 얼마나 잘 안내하느냐에 따라 달라집니다. Karim의 팀은 에이전트가 공감을 표현하고 브랜드에 맞게 응답하도록 프롬프트 작성에 많은 시간을 투자했습니다.
3. 아랍어 도입 시에는 타쉬킬(tashkeel)을 사용하세요.에이전트 프롬프트에 아랍어 모음 기호를 추가하면 발음 정확도와 자연스러움이 크게 향상됩니다.
4. 인력은 내보내지 말고 상위 단계로 이동시키세요.남은 팀원들은 AI를 대체하는 것이 아니라, AI를 개선하는 데 활용하는 것이 가장 좋습니다. 워크플로우 설계와 품질 검토를 맡기세요.
5. 처음부터 확장성을 고려해 구축하세요.첫 에이전트가 도입되면, 같은 플랫폼으로 아웃바운드 콜, 내부 워크플로우, 광고, 부서 간 다양한 활용이 가능합니다. Nana는 이제 새로운 프로젝트가 빠르게 필요할 때 다른 팀들이 찾는 부서가 되었습니다.
6. 직접 소스에 접근하세요. Nana가 검토한 여러 업체는 ElevenLabs를 비싸게 재판매하고 있었습니다. ElevenLabs를 직접 활용하니 최신 모델, 더 낮은 비용, 직접적인 엔지니어 지원까지 받을 수 있었습니다.

인스타헬프여기에서 확인하세요.