Meta의 Movie Gen은 으스스한 비디오와 오디오를 만들 수 있습니다

생성적 AI 시대의 자연스러운 다음 단계는 생성적 비디오이지만 이는 단순히 그림이나 텍스트를 생성하는 것보다 훨씬 더 복잡합니다. Meta의 Movie Gen AI는 모든 비디오 생성 요구 사항을 충족하는 포괄적인 인터페이스가 되기를 원하지만 아직 공개적으로 사용할 수는 없습니다.

Meta는 텍스트 프롬프트를 사용하여 비디오와 오디오를 생성하고 편집할 수 있는 새로운 생성 AI 모델 세트인 Movie Gen을 발표했습니다. 이 모델은 업계의 유사한 모델보다 성능이 뛰어나며 AI 기반 미디어 제작에 있어 상당한 발전을 의미한다고 합니다. Movie Gen을 사용하면 텍스트 프롬프트에서 최대 16초 길이의 비디오를 생성할 수 있을 뿐만 아니라 이미지와 텍스트 프롬프트를 기반으로 특정 인물이 등장하는 비디오를 생성할 수 있습니다. 또한 텍스트 프롬프트를 사용하여 기존 비디오를 편집하고 요소를 정밀하게 추가, 제거 또는 교체할 수 있으며 주변 소리, 음향 효과 및 배경 음악을 포함하여 비디오 콘텐츠와 동기화되는 최대 45초 길이의 오디오를 생성할 수도 있습니다. 생성된 비디오를 가지고 가세요.

비디오 생성은 회사가 오랫동안 진행해온 작업이며, 이제 이러한 노력이 마침내 완성품에 가까워졌습니다. Meta는 Movie Gen이 비디오 품질, 개인화, 편집 정확도 및 오디오-비디오 정렬을 포함한 여러 영역에서 최첨단 결과를 달성했다고 주장합니다. 회사는 이러한 성과를 모델 아키텍처, 교육 데이터 및 평가 방법의 기술 혁신에 기인합니다. 회사는 궁극적으로 영화제작자 및 제작자와 협력하여 Movie Gen이 창의적인 표현을 위한 귀중한 도구가 되도록 하는 것을 목표로 하고 있습니다. Movie Gen의 잠재적인 응용 분야에는 소셜 미디어용 애니메이션 비디오 제작, 개인화된 인사말 생성, 간단한 텍스트 명령을 사용한 비디오 편집 등이 있습니다.

Meta는 우리가 언제 이것을 확인해야 할지에 대한 실제 타임라인을 제공하지 않습니다. 일반적으로 AI 비디오 생성은 현재 초기 단계에 있으며 현재 이미지/텍스트 모델만큼 발전된 모델이 없습니다. 곧 출시된다면 상황이 바뀔 수도 있습니다.

출처 : 메타