텍스트-비디오 생성을 위한 안정적인 비디오 확산을 도입한 안정성 AI

디크립트에 따르면, 스테이블리티 AI는 고해상도 텍스트-투-비디오 및 이미지-투-비디오 생성을 위해 설계된 텍스트-투-비디오 도구인 스테이블 비디오 디퓨전(Stable Video Diffusion)을 출시했다고 발표했습니다. 이 회사의 연구 논문은 이 도구의 적응성과 오픈 소스 기술을 강조하며 광고, 교육 및 엔터테인먼트 분야에서 다양한 응용이 가능하다고 설명합니다. 안정적인 비디오 확산은 현재 연구 프리뷰 버전으로 제공되며, 훨씬 적은 컴퓨팅 예산으로 이미지 기반 방법보다 성능이 뛰어나다고 주장합니다. 스테이블리티 AI는 스테이블 비디오 디퓨전 산하에 두 가지 모델을 개발했습니다: SVD와 SVD-XT입니다. SVD 모델은 정지 이미지를 14프레임의 576x1024 비디오로 변환하고, SVD-XT는 동일한 아키텍처를 사용하지만 24프레임으로 확장합니다. 두 모델 모두 초당 3~30프레임의 프레임 속도로 비디오를 생성하여 최첨단 오픈 소스 텍스트-비디오 기술을 선보입니다. 스테이블 비디오 디퓨전은 빠르게 진화하는 AI 비디오 생성 분야에서 피카 랩스, 런웨이, 메타의 혁신적인 모델과 경쟁하고 있습니다. 스테이블리티 AI는 기술적 성과에도 불구하고 AI 학습에 저작권이 있는 데이터를 사용하는 것과 관련된 윤리적 고려 사항 등 여러 도전 과제에 직면해 있습니다. 유니티는 이 모델이 현재 단계에서는 실제 또는 상업적 적용을 위한 것이 아니며, 커뮤니티의 피드백과 안전 문제를 바탕으로 모델을 개선하는 데 중점을 두고 있다고 강조합니다.