LG유플러스 음성 AI 동맹 출범… 서울대·KAIST·연세대와 맞손

핵심요약

기사 핵심 요약

LG유플러스가 국내 3개 대학과 연합해 텍스트 변환 없는 V2V 방식 음성 AI 기술을 개발한다.

• LG유플러스가 서울대, KAIST, 연세대와 K-보이스 AI 얼라이언스를 출범했다.
• 중간 문자 변환을 건너뛰고 음성을 즉각 합성하는 V2V 기술 개발에 집중한다.
• 한국어 감정과 맥락을 보존해 고객센터 및 대화형 에이전트 서비스에 적용한다.

LG유플러스가 한국어 특성에 맞춘 음성 AI 원천기술 자립을 위해 국내 주요 3개 대학과 산학 협력체를 발족했다. LG유플러스는 11월 9일 서울 용산 사옥에서 서울대학교, 한국과학기술원(KAIST), 연세대학교와 함께 ‘K-보이스 AI 얼라이언스’ 출범식을 열었다. 이날 행사에는 이상엽 LG유플러스 최고기술책임자(CTO·전무)를 비롯해 이교구 서울대 융합과학기술대학원 교수, 정준선 KAIST 전기 및 전자공학부 교수, 조대곤 연세대 경영대학 교수 등 연구 책임자들이 참석해 공동 연구 추진 방안을 공유했다.

이번 협력체는 해외 거대언어모델(LLM)과 음성 솔루션에 대한 기술 의존도를 낮추고 국내 이용 환경에 최적화된 음성 AI 생태계를 구축하기 위해 결성됐다. 참여 기관들은 한국어 음성 AI 성능 평가 기준을 수립하고, 다양한 대고객 서비스에 범용으로 접목할 수 있는 자체 ‘K-보이스 엔진’을 공동 개발한다. LG유플러스는 앞서 모바일 통화 영역에서 익시오 AI 비서와 같은 대화형 에이전트 전략을 공개한 바 있으며, 이번 산학 동맹으로 기저 엔진의 토착화 수준을 한 단계 끌어올릴 방침이다.

국내 3개 대학과 'K-보이스 AI 얼라이언스' 결성

LG유플러스는 서울대, KAIST, 연세대와 기술 연합 전선을 펴고 한국어 음성 인공지능의 원천 성능 확보에 나선다. 글로벌 빅테크 기업들이 제공하는 범용 음성 솔루션은 한국어 특유의 줄임말, 고유 어조, 복잡한 문맥 처리에서 오차가 발생하는 일이 잦아 국내 서비스 접목에 한계가 지적돼 왔다. 산학 연합은 이러한 구조적 제약을 해소하고자 평가 지표 수립부터 엔진 설계까지 연구 전 주기를 공동으로 진행한다.

출범식에 참여한 산학 주체들은 한국어 음성 모델의 정량적 평가 체계를 우선 마련하기로 합의했다. 기관별 연구 범위와 역할은 다음과 같다.

• 평가 기준 표준화: 한국어 특유의 발음 변형 및 대화 맥락 반영도를 측정하는 공동 평가 체계 수립
• K-보이스 엔진 설계: 대화형 서비스 전반에 범용으로 탑재 가능한 한국어 특화 소프트웨어 코어 구축
• 원천기술 산학 검증: 실험실 단계의 알고리즘을 통신사 인프라 및 실제 고객 응대 시스템에 연결해 상용성 점검

문자 변환 거치지 않는 '음성 대 음성(V2V)' 기술 집중

K-보이스 AI 얼라이언스가 집중적으로 다루는 핵심 축은 ‘음성 대 음성(V2V·Voice-to-Voice)’ 기술이다. 기존의 통상적인 음성 대화 시스템은 이용자의 목소리를 문자 형태로 변환(STT)해 대형언어모델에 입력한 뒤, 생성된 답변 문장을 다시 기계음(TTS)으로 합성해 들려주는 3단계 파이프라인 구조를 따랐다. 이 방식은 문자로 치환되는 과정에서 감정과 억양이 휘발되고 연산 처리 단계가 누적되면서 응답 지연이 불가피했다.

반면 V2V 방식은 음성 신호를 중간 텍스트 매개 없이 다이렉트로 분석해 곧바로 음성 응답을 합성해 낸다. AI가 발화자의 음조와 감정선, 호흡 주기를 직접 해석하기 때문에 자연스러운 맞장구나 끼어들기 대응이 가능해진다. 홍범식 LG유플러스 사장은 2026년 3월 MWC 2026 개막일 기조연설에서 음성이 AI 시대의 핵심 인터페이스가 될 것이라고 강조한 바 있다. 기존 통화 보안 영역에서 안티딥보이스 상용화를 추진했던 것처럼, 입력 음성을 실시간 원천 단위로 해석하는 역량은 서비스 품질을 좌우하는 핵심 척도로 꼽힌다.

표: 음성 AI 처리 방식별 기술 특성 비교

구분	기존 방식 (STT → LLM → TTS)	V2V 방식 (음성 대 음성 직결)
처리 파이프라인	음성 녹음 후 텍스트 변환 거쳐 답변 생성 및 음성 재합성	음성 입력을 직접 해석해 중간 변환 없이 음성으로 즉각 합성
응답 속도	문자 변환 및 생성 단계를 거쳐 응답 지연 발생	연산 단계 축소로 실시간 대화에 준하는 빠른 반응
감정 및 뉘앙스 처리	문자화 과정에서 억양, 톤, 감정 정보 소실	발화자의 감정, 억양, 말의 높낮이와 대화 맥락 보존
대화 자연스러움	기계적 음성 합성으로 발음이 다소 부자연스러움	상황에 맞는 말투와 자연스러운 호흡 조절 가능

서울대·KAIST·연세대 대학별 연구 분담 구조

이번 프로젝트는 3개 대학의 전공 역량을 살려 상호 보완적인 연구 분담 구조를 확립했다. 각 대학은 발화 자연스러움 확보, 다자간 대화 맥락 유지, 고객 응대 품질 검증 등 상용화 필수 과제를 하나씩 분담해 완성도를 높인다.

• 서울대학교 (이교구 교수 연구팀): 사용자의 현재 상황과 감정선에 부합하는 말투와 목소리를 동적으로 생성하는 기술을 연구한다. 사람이 말하는 도중 끊김 없이 경청하면서 적절한 타이밍에 음성으로 응답하는 실시간 발화 상호작용 메커니즘을 규명한다.
• KAIST (정준선 교수 연구팀): 여러 화자가 한자리에서 섞여 말하는 복합 환경에서 AI가 누구의 발언에 반응해야 하는지 화자를 선별하는 기술을 개발한다. 대화가 장시간 지속되더라도 앞서 나눈 발화 맥락을 기억하고 추론에 반영하는 장기 기억 유지 모델도 함께 담당한다.
• 연세대학교 (조대곤 교수 연구팀): 고도화된 음성 AI를 실제 고객센터 상담 서비스에 접목했을 때의 정량적 효용성을 검증한다. 이용자가 AI의 음성 설명을 얼마나 명확히 인지하는지, 복잡한 상담 절차를 오차 없이 마칠 수 있는지 등 사용자 경험(UX) 측면의 완결성을 집중 분석한다.

'K-보이스 엔진' 고도화와 서비스 적용 계획

LG유플러스는 이번 산학 협력을 발판 삼아 음성 AI 원천기술 연구 기반을 확충하고 K-보이스 엔진의 완성도를 점진적으로 강화한다. 축적된 연구 성과물은 실제 대고객 상담 센터 시스템과 모바일 에이전트 서비스 등 다양한 제품군에 단계적으로 탑재될 예정이다. 해외 기술 종속에서 벗어나 통신 데이터 환경에 최적화된 독립 기술 자산을 확보하겠다는 구상이다.

이상엽 LG유플러스 CTO는 “음성은 누구나 쉽고 자연스럽게 AI를 이용할 수 있게 하는 중요한 수단”이라며 “이번 산학 협력을 통해 한국인과 한국어에 특화된 K-Voice AI 기술을 확보하고, 고객에게 새로운 음성 AI 경험을 제공하고, 이를 통해 노년층 등 AI시대에 소외되는 계층이 줄어들 수 있도록 기술 경쟁력을 강화해 나가겠다”고 밝혔다.

자주 묻는 질문

K-보이스 AI 얼라이언스에는 어떤 기관들이 참여하나요?

LG유플러스를 비롯해 서울대학교, 한국과학기술원(KAIST), 연세대학교 3개 대학 연구팀이 참여합니다.

V2V(음성 대 음성) 기술은 기존 대화형 AI와 어떻게 다른가요?

음성을 문자로 바꾼 뒤 다시 음성으로 합성하는 기존 3단계 방식과 달리, 텍스트 변환 없이 음성을 직접 분석하고 곧바로 응답 음성을 생성해 지연을 줄이고 감정과 억양을 살립니다.

개발된 한국어 음성 AI 기술은 어디에 쓰이나요?

실제 대고객 상담 센터 시스템과 모바일 AI 에이전트 서비스 등 다양한 제품군에 단계적으로 탑재될 예정입니다.