Google, 'Lumiere(뤼미에르)' 공개: 혁신적인 비디오 생성 AI

구글이 새로운 인공지능(AI) 비디오 생성 도구 뤼미에르(Lumiere)를 1월 25일(현지시간) 공개했습니다.

Lumiere는 그동안 대부분의 AI가 여러 개의 프레임을 생성하고 프레임끼리 보강하는 방식으로 동영상을 생성함에 따라 프레임 간의 연결이 부자연스러워지는 문제에 대해 전체 프레임을 한 번에 생성하는 방식을 채택해 연결이 자연스럽고 위화감이 적은 동영상을 생성할 수 있습니다.

또한, 뤼미에르는 동영상의 일부분을 지정해 다른 동영상으로 대체하거나, 사진의 일부분만 이동시키는 등의 조작도 가능하며 텍스트나 이미지를 입력해 동영상을 만들 수도 있습니다.

Google Lumiere AI 동영상 도구란 무엇인가요?

Google Lumiere는 Google Research에서 개발한 최첨단 인공 지능 비디오 모델로, 비디오 콘텐츠를 생성하는 도구입니다. 연구 프로젝트로 시작된 Lumiere는 기존 AI 비디오 모델의 문제점을 해결하면서 비디오 제작에 대한 새로운 접근 방식을 사용하고 있습니다.

많은 AI 비디오 모델이 직면한 주요 문제 중 하나는 움직임의 일관성을 유지하는데 어려움을 겪는 것입니다. 걷는 것과 같은 자연스러운 움직임을 포착할 수 있지만, 다른 요소는 종종 고르지 않게 나타나거나 배경과 자연스럽게 조화를 이룹니다. Google Lumiere는 이러한 문제를 해결하여 전체 비디오 클립에서 일관되고, 부드럽고, 사실적인 움직임을 생성할 수 있는 솔루션을 제공합니다.

Lumiere를 차별화하는 것은 혁신적인 시공간 아키텍처입니다. 프레임별로 동영상을 조립하는 기존 모델과 달리 Google Lumiere AI는 개체 배치와 이동을 동시에 처리합니다. 이 시공간 접근 방식에는 전체 비디오를 하나의 응집력 있는 프로세스로 고려하는 것이 포함됩니다. 객체를 배치할 위치를 결정하는 "공간" 측면과 해당 객체가 언제 어떻게 이동하는지 정의하는 "시간" 요소를 고려합니다. 이를 통해 비디오 콘텐츠가 전체적으로 동기화되어 생성됩니다.

Lumiere의 기능은 텍스트-비디오 및 이미지-비디오 애플리케이션 전반으로 확장됩니다. 사용자는 이 모델을 활용하여 텍스트 설명이나 참조 이미지를 기반으로 비디오를 생성할 수 있습니다. 시공간 아키텍처를 통해 비디오 내 요소의 모양을 정밀하게 제어할 수 있어 이전 모델에서는 쉽게 달성할 수 없었던 수준의 비디오 콘텐츠 제작이 가능합니다.

Google Lumiere AI를 어떻게 사용하나요?

Lumiere의 기능은 더 부드러운 동작을 구현하는 것 이상입니다. 이 모델은 이미지의 특정 영역을 독립적으로 애니메이션 화하는 데 탁월하여 비디오 제작에서 세부 수준과 사용자 정의 기능을 제공합니다. 또한 인페인팅 기능을 제공하여 옷의 스타일이나 프레임에 등장하는 동물의 유형을 변경하는 등의 변경이 가능합니다. Google Research 팀은 Lumiere가 달성한 '최첨단 텍스트-비디오 생성 결과'와 다양한 콘텐츠 제작 작업 및 비디오 편집 애플리케이션을 용이하게 할 수 있는 잠재력을 강조합니다.

잠재적인 실제 응용 프로그램

Google Lumiere AI는 현재 연구 프로젝트이며 공개적으로 사용할 수는 없지만 이번 발표는 기본 기술을 향후 Google 제품에 통합할 가능성을 시사합니다. 현실 세계에서 Lumiere의 운명은 연구자들의 수용 여부와 Google이 포함하기에 적합한 프로젝트를 식별하는지 여부에 따라 달려있습니다. 혁신적인 연구를 브랜드 제품에 통합해 온 Google의 역사를 고려할 때 Lumiere는 AI 비디오 생성 기술의 중요한 발전을 약속합니다.

결론적으로, Google Lumiere는 AI는 주요 과제를 해결하고 역동적이고 일관된 비디오 콘텐츠를 제작할 수 있는 새로운 가능성을 열어주는 고유한 시공간 아키텍처를 제공함으로써 AI 비디오 생성 분야의 도약을 나타냅니다.