'최초·최다 AI 더빙' 허드슨에이아이 “에이전틱 더빙 시대 열 것”

허드슨에이아이, AI 더빙의 새로운 시대를 열다

AI 음성 기술이 콘텐츠 제작과 소통의 방식을 혁신적으로 변화시키고 있습니다. 특히 허드슨에이아이(Hudson AI)는 AI 더빙 분야에서 주목할 만한 성과를 거두며 새로운 가능성을 보여주고 있습니다. 신현진 대표는 “AI 음성 기술은 우리가 나아가는 방향과 맞닿아 있다”며, 현재 콘텐츠 더빙에만 국한되지 않고, 향후 실시간 소통의 핵심 기술로 자리 잡을 것이라고 강조했습니다. 이처럼 허드슨에이아이는 AI 더빙의 선두주자로 자리매김하고 있으며, 그 기술적 발전과 그에 따른 미래의 비전을 살펴보겠습니다.

최초의 AI 더빙 모델과 지속 가능한 발전

허드슨에이아이는 2022년부터 AI 더빙에 집중해 왔으며, 당시 업계에서 AI 더빙을 활용한 사업 모델은 전무한 상태였습니다. 이들은 장편영화에 대한 AI 더빙도 최초로 시도하였고, 그 결과물은 2023년 1분기에 완성되었습니다. 신 대표는 “더빙의 품질은 무엇보다 중요하다”며, “품질이 낮은 더빙은 원본의 퀄리티마저 저하할 수 있다”고 말했습니다. 따라서 허드슨에이아이는 시간과 비용보다 실제 결과물의 질을 우선시하고 있습니다.

AI 더빙은 단순한 음성 변환을 넘어, 번역, 음성 인식, 텍스트-음성 전환(TTS) 등 다양한 기술이 결합된 ‘종합예술’로 볼 수 있습니다. 예를 들어, 드라마의 경우 엄밀한 대본이 필요하며, 각 등장인물의 발화 시점을 정확히 기록해야 합니다. 이러한 과정은 복잡하지만, 허드슨에이아이의 ‘허드슨 스튜디오’ 솔루션을 활용하면 훨씬 더 효율적으로 진행할 수 있습니다.

감정 표현의 중요성과 기술적 도전

AI 더빙에서 가장 큰 도전 중 하나는 바로 감정 표현입니다. 신 대표는 “감정은 단순한 자연스러움의 문제가 아니다”라고 강조하며, 언어권에 따라 감정이 전이되는 방식이 다르다고 설명했습니다. 예를 들어, 한국 드라마의 주인공이 신나는 감정으로 대사를 할 경우, 인도네시아어로 더빙할 때는 상대적으로 차분한 톤으로 변환해야 자연스러움을 유지할 수 있습니다.

허드슨에이아이는 ‘감정 태그’를 활용하여 더 정확한 감정 묘사를 시도하고 있습니다. 멀티모달 AI 기술을 통해 영상, 사진, 텍스트의 문맥을 고려한 감정 태그를 부여함으로써 AI 자동 더빙의 품질을 한층 높이고 있습니다. 더욱이, 특정한 용어는 전체 에피소드에서 일관성을 유지해야 하며, 이러한 세세한 작업이 AI 더빙의 성공에 기여하고 있습니다.

향후 비전과 글로벌 시장으로의 확장

허드슨에이아이의 궁극적인 목표는 AI 더빙 시스템의 완전한 자동화입니다. 현재 원어민 검수단계를 넘어, AI가 스스로 평가하고 조정할 수 있는 시스템을 구축하는 것이죠. 이를 통해 더빙 속도를 높이고, 다국어 번역의 품질을 끌어올릴 수 있을 것입니다. 신 대표는 “현재 기술로는 최소 20명의 원어민 인력이 필요하지만, 자동화가 이루어지면 소규모 콘텐츠도 더 넓은 글로벌 시장으로 뻗어나갈 기회를 얻게 된다”고 말했습니다.

AI 더빙은 단순히 기술의 발전에 그치지 않고, 콘텐츠의 현지화를 통해 한국 드라마와 같은 소규모 콘텐츠가 국제적으로 더 많이 소비될 수 있는 기회를 만들어 줄 것입니다. 허드슨에이아이의 혁신적인 접근 방식은 앞으로도 AI 더빙 분야의 새로운 패러다임을 제시할 것으로 기대됩니다.