스웨덴 영화 '워치 더 스카이즈'의 AI 비주얼 더빙

5월 미국 극장에서 개봉 예정인 스웨덴의 UFO 스릴러 영화 '워치 더 스카이즈'는 제너레이티브 AI 기술을 사용해 영어로 더빙된다는 파격적인 이유로 화제를 모으고 있습니다.

그리고영화 원래 제목은 UFO 스웨덴이었지만, 미국 개봉을 위해 영어 대사는 AI를 통해 배우의 입술 움직임에 맞춰 동기화됩니다.

이 '비주얼 더빙' 기술은 AI 회사인 Flawless가 개발한 것으로, 트루싱크 머신러닝 기술을 사용하여 배우의 연기가 새로운 언어와 매끄럽게 일치하도록 합니다.

감독이자 작가인 빅터 다넬은 영화 제작에서 AI의 역할 증가에 대한 배우와 대중의 잠재적 우려를 인식하고, AI 혁신을 더 많은 관객에게 다가갈 수 있는 방안으로 보고 있습니다.

잠재적인 반발에도 불구하고 Danelle은 이 기술을 사용함으로써 영화의 본질을 유지하면서도 영어권 시청자가 접근할 수 있게 되었다고 강조합니다.

이 프로젝트는 다음과 같은 우려를 표명 한 배우 노조 인 SAG-AFTRA의 전폭적 인 지원을 받았습니다.AI가 업계에 미치는 영향.

다넬은 언어만 다를 뿐 배우와 연기는 동일하다며 영화에 대한 자신감을 잃지 않았습니다.

그는 이렇게 말했습니다:

"많은 영화 제작자와 배우들이 처음에는 이 기술을 두려워하겠지만, 우리는 창의적인 통제권을 가지고 있고 영어로 영화를 연기하는 것은 정말 흥미로운 경험이었습니다. 여전히 우리 영화이고, 여전히 배우들의 연기이며, 그것이 가장 중요한 부분입니다."

영화에서 AI 사용에 대한 백래시

2023년 프레젠테이션에서 Flawless의 공동 창립자인 Scott Mann은 딥러닝을 사용하여 영화 전체에서 배우의 얼굴 3D 모델을 생성하는 회사의 TrueSync 기술에 대해 설명했습니다.

이 모델을 사용하면 원하는 더빙 언어에 맞게 배우의 얼굴 표정을 조정할 수 있습니다.

트루싱크는 앞서 2022년 개봉한 영화 '폴'에서 비속어를 제거하여 PG-13 버전을 제작하는 데 사용된 바 있습니다.

또한 Flawless는 재촬영 없이도 편집자가 배우의 연기를 한 장면에서 다른 장면으로 옮길 수 있는 도구인 DeepEditor를 개발했습니다.

또한 배급사 XYZ 필름과의 파트너십을 통해 더 라이트, 빈센트 머스트 다이, 스머글러 등 여러 예정 프로젝트를 트루싱크를 사용하여 현지화 중입니다.

일부에서는 이 기술이 호평을 받고 있지만, 영화 제작에 사용되면서 더 광범위한 우려를 불러일으키고 있습니다.

최근 넷플릭스의 다큐 시리즈 아메리칸 머더에서 이러한 사례가 발생했습니다: 가비 페티토, 여기서AI 생성 음성 를 사용하여 사망한 캐릭터를 묘사했습니다.

특히 페티토의 부모가 시리즈에 동의했음에도 불구하고 AI가 생성한 딸의 목소리를 듣는 것에 대해 불편함을 표명하면서 이 결정은 비판에 직면했습니다.

이 사건은 크리에이티브 산업에서 AI의 역할과 관련 주체에 대한 진정성 및 존중의 잠재적 영향에 대한 논쟁이 커지고 있음을 반영합니다.

영화 자막에 작별을 고하시나요?

Flawless의 트루싱크와 같은 AI 더빙 기술은 영화가 전 세계 시청자에게 더 효율적으로 도달할 수 있도록 함으로써 영화 산업에 상당한 이점을 제공합니다.

이러한 기술은 더빙 프로세스를 간소화하여 시간과 리소스를 절약하는 동시에 언어 장벽을 넘어 시청자의 접근성을 향상시킵니다.

또한 DeepEditor와 같은 혁신 기술은 포스트 프로덕션 프로세스를 개선하여 효율성을 더욱 높여줍니다.

그러나 주목할 만한 우려 사항도 있습니다.

AI 더빙은 인간 배우가 연기에 가져다주는 진정성과 감정적 깊이가 부족하여 시청자와의 연결성을 약화시킬 수 있습니다.영화 .

아메리칸 머더에서 볼 수 있듯이 사망한 사람의 목소리를 생성하는 등 민감한 상황에서 AI를 사용하는 것은 윤리적 문제를 제기하고 있습니다: 가비 페티토 다큐 시리즈에서 볼 수 있듯이.

또한, AI에 대한 의존도가 높아지면 인간 전문가들의 일자리가 사라져 인간의 예술성이 침식될 수 있다는 우려가 더욱 커질 수 있습니다.

요컨대, AI 더빙은 효율성과 접근성 측면에서 상당한 이점을 제공하지만, 영화 산업은 혁신과 인간의 재능 보존 및 윤리적 기준의 균형을 유지하여 영화의 본질을 훼손하지 않으면서도 AI의 역할이 유익하게 유지되도록 해야 합니다.