1. 협업 배경

SK텔레콤은 미디어 및 콘텐츠 사업을 강화하고 AI 기반 음성·영상 기술을 활용한 글로벌 콘텐츠 접근성 확대를 추진하고 있었다. 특히, AI 더빙 기술을 활용하여 다양한 언어로의 콘텐츠 변환을 효율적으로 지원하고, 몰입감 있는 시청 경험을 제공하는 것이 목표였다. 이에 따라 AI 기반 음성 및 영상 생성 기술을 보유한 허드슨에이아이와 협력하여, AI 기반 더빙 솔루션을 개발하고 상용화하는 프로젝트를 추진하였다. 협업의 주요 목표는 기존 더빙 방식보다 자연스럽고 효율적인 AI 기반 더빙 기술을 도입하여 콘텐츠 접근성을 높이고, 글로벌 미디어 시장에서 경쟁력을 확보하는 것이었다.

2. 협업 대상

SK텔레콤

SK텔레콤은 글로벌 AI 시장을 이끌기 위해 AI 스타트업 액셀러레이터(AI Startup Accelerator) 프로그램과 ESG분야 스타트업 프로그램(ESG Korea) 등을 진행하며, AI 스타트업을 지원 · 협력하는 활동을 이어가고 있다.

허드슨에이아이

허드슨에이아이는 생성형 AI 기술을 활용하여 영상의 음성 더빙, 립싱크, 다국어 번역 서비스를 제공하는 기업이다. 음성 변환 기술을 통해 현실감 있고 생동감 있는 오디오를 생성하며, 립싱크 합성 기술로 원본 영상의 품질을 유지하면서 자연스러운 입술 움직임을 구현한다.

3. 협업 내용

A. 기술/서비스 협력

SKT와 허드슨에이아이는 AI 기반 더빙 기술을 공동 개발하여, 기존 더빙 방식 대비 자연스러운 청취 경험과 영상 일관성을 제공하는 솔루션을 구축하였다. 허드슨에이아이의 AI 보이스 기술을 활용하여 배우의 음성 특징을 유지하면서 다국어 더빙이 가능하도록 구현하였으며, 이를 기반으로 AI 립싱크 기술을 접목하여 음성과 입모양이 일치하는 영상 콘텐츠를 제작할 수 있도록 하였다.

B. 협업 프로세스

2022년 SKT의 True Innovation 프로그램을 통해 허드슨에이아이가 협력 파트너로 선정되었으며, 이후 SK브로드밴드, SK스토어, 웨이브(Wavve) 등 SK 관계사와의 공동 프로젝트를 수행하였다. 이를 통해 AI 기반 더빙 기술이 적용된 콘텐츠를 제작하였으며, 2024년 2월 스페인 바르셀로나에서 개최된 MWC24의 4YFN(4 Years from Now) 행사에서 SKT와의 협업 사례를 발표하며 글로벌 시장에서의 사업 기회를 모색하였다.

C. 개발 결과물

협업의 결과, SK브로드밴드의 B tv에서 국내 최초로 AI Voice Conversion 기술이 적용된 장편 영화 더빙 서비스가 제공되었다. 이를 통해 기존의 더빙 방식에서 수십 명의 성우가 필요했던 작업을 AI 기술이 대체할 수 있게 되었으며, 제작 비용과 시간을 절감하는 효과를 거두었다.

D. 기대 효과

SKT는 AI 기반 더빙 솔루션을 도입하여 미디어 콘텐츠 경쟁력을 강화하고, 글로벌 콘텐츠 시장에서의 경쟁력을 확보할 수 있게 되었다. 허드슨에이아이는 SKT와의 협력을 바탕으로 AI 기반 더빙 기술의 상용화를 추진하며, 더빙 수요가 높은 유럽 시장을 포함한 글로벌 시장 진출을 적극적으로 확대하고 있다.

[SK텔레콤] 음성 및 영상 멀티모달 AI기술 활용 크리에이터 더빙 솔루션 기업 허드슨에이아이

수요 기업

SK텔레콤

참여 기업

허드슨에이아이