ElevenLabs · 공식 공개 시연 썸네일1200×675 원본 · 새로 촬영한 취재사진 또는 독립 품질검증 아님 · 보도 인용(허가 취득 아님)외국어 더빙을 넣었더니 목소리는 바뀌었는데 화면 속 입은 원래 말을 하고 있다. ElevenCreative가 공개한 Dub & Sync는 이 어긋남을 한 작업 안에서 다룬다. 영상을 올리고 대상 언어를 고르면, 번역된 음성과 그 음성에 맞춘 입모양을 함께 만드는 도구다.
언어를 고르면 더빙과 립싱크를 한 번에
ElevenCreative는 한국시간13일 오전0시39분 공식 게시물에서 기능 공개를 알렸다. 발표가 제시한 흐름은 영상 업로드, 대상 언어 선택, 더빙과 립싱크가 적용된 결과 받기다. 별도의 프롬프트를 쓰거나 두 작업을 따로 편집할 필요 없이 한 번에 처리한다는 설명이다.
14일 검수한 현재 도구 화면에는 알파 표시와 ‘최대2분’ 원본 영상 안내가 있다. 언어 선택 목록에는 한국어·일본어·영어권 밖 여러 언어가 포함돼 있으며, 공식 예시에도 일본어와 한국어로 바꾼 영상이 있다. 한국어 선택 항목이 있다는 사실과 한국어 결과의 자연스러움은 별개다. 이번에는 공개 예시와 입력 조건을 확인했으며 새 유료 생성으로 품질을 시험하지 않았다.
기존 음성 더빙과 달라진 지점은 영상
ElevenLabs의 Dubbing v2 API 안내는 원래 연기의 감정·톤·타이밍을 반영한 번역 음성을 설명한다. 이 안내에서 말하는 sync-aware translation은 음성이 들어갈 시간을 맞추는 것으로, 영상 조작이나 입모양 동기화가 포함된다는 뜻은 아니라고 명시한다. Dub & Sync는 더빙된 목소리에 맞춰 화면 속 입까지 맞추는 작업을 묶었다는 점에서 구별된다.
기존 API의 언어 수나 분당 가격을 새 앱의 확정 요금으로 옮겨 읽어서는 안 된다. 공식 출시 글에는 Dub & Sync의 별도 가격이나 무료 횟수가 적혀 있지 않다. 실제 작업 전 앱에서 원본 길이·선택 언어와 비용 표시를 확인하면 된다. 같은 영상을 여러 언어로 배포하는 제작자에게는, 번역 음성을 만든 뒤 입모양 처리 도구로 다시 옮기는 단계를 줄이는 변화다.
출처로 확인한 내용
3건
공식 발표는 영상 업로드와 대상 언어 선택으로 더빙·립싱크를 한 번에 처리한다고 안내했다.
현재 알파 화면은 원본 최대2분과 한국어 언어 선택을 제공한다.
기존 Dubbing v2 API의 sync-aware translation은 영상 조작이나 립싱크를 포함하지 않는다.
