작동 방식
얼굴 제공
더빙할 영상을 업로드하거나, 애니메이션화할 단일 초상 사진을 업로드하세요. 정면을 향한, 잘 조명된 얼굴로 입이 명확하게 보이는 경우 가장 설득력 있게 동기화됩니다.
오디오 추가
녹음을 업로드하거나, 오디오 스튜디오에서 텍스트 음성 변환이나 복제된 음성으로 음성을 먼저 생성하세요. 모델은 각 음성 소리를 일치하는 입 모양으로 매핑합니다.
동기화된 영상 생성
모델은 입 영역을 프레임 단위로 재생성하거나, 사진에서 전체 얼굴을 애니메이션화하여 입술, 턱, 표정이 소리와 함께 움직입니다.
지금 바로 사용할 수 있는 모델
아래의 모든 모델은 현재 크레딧 비용과 함께 Arteza에서 실시간으로 제공되며, 생성 시 스튜디오에서 사용하는 것과 동일한 가격 엔진에서 가져옵니다.
자주 묻는 질문
사진을 립싱크할 수 있나요, 아니면 영상이 필요한가요?
두 워크플로우 모두 지원됩니다. Sync-3 Lipsync는 기존 영상을 최대 4K의 새로운 오디오로 더빙합니다. OmniHuman v1.5, Kling Avatar v2, Infini Talk는 단일 사진과 오디오 파일을 완전한 말하는 영상으로 애니메이션화합니다.
AI 립싱크가 모든 언어에서 작동하나요?
일반적으로 그렇습니다. 모델은 단어를 이해하기보다는 소리를 입 모양으로 매핑하므로, 대부분의 음성 언어로 입을 동기화할 수 있으며, 이것이 립싱크가 영상 번역 및 지역화된 콘텐츠의 핵심인 이유입니다.
최고의 결과를 위해 어떤 입력이 필요한가요?
무거운 음악 없는 깨끗한 음성 오디오, 그리고 합리적으로 크고 정면을 향하며 방해받지 않는 얼굴. 빠른 머리 회전, 입 위의 손, 극단적인 각도에서 아티팩트가 나타납니다.
다른 사람의 얼굴을 사용할 수 있나요?
동의가 있을 때만 가능합니다. 립싱크는 정당한 더빙, 번역, 아바타 콘텐츠에 널리 사용되지만, 동의한 사람들의 모습만 애니메이션화해야 합니다.