본문 바로가기
카테고리 없음

동영상 생성 모델 AI 프로그램 살펴보기 | #1 Runway ML

by yoohoo 2024. 7. 4.
728x90

logo
runway

 

Runway ML

아티스트, 디자이너, 개발자들이 머신러닝 모델을 창의적인 작업에 활용할 수 있도록 설계된 종합 툴킷입니다. 이미지 및 비디오 생성, 스타일 변환, 객체 인식 등의 작업을 위한 다양한 사전 훈련된 모델과 도구를 제공합니다.

 

Runway ML과 Runway AI

Runway MLRunway AI는 자주 혼용되지만, Runway AI는 보통 Runway ML 플랫폼 내에서 특정 AI 구동 도구와 기능을 지칭합니다.

 

 

Gen-1 에서 Gen-3까지

Runway는 비디오 생성 및 편집을 위한 고급 AI 모델을 제공하는 플랫폼입니다. Gen 1, Gen 2, Gen 3는 각각의 발전 단계를 나타내며, 각 버전은 이전보다 더 강력하고 다양한 기능을 제공합니다.

 

 

Gen-1 : Video to Video Translation

Gen 1은 Runway에서 첫 번째로 공개한 비디오 생성 AI 모델로, 주로 기존 비디오를 기반으로 새로운 비디오를 생성하는 기능을 제공합니다. 영상 스타일을 바꿀 원본 동영상이 필요하며 이미지 또는 텍스트 입력으로는 비디오를 생성할 수 없습니다. 

imageimage2
출처 : runway 공식 사이트

 

주요 기능은 다음과 같습니다.

  • 스타일 참조 (Style reference) : 스타일을 변환할 때 참조할 스타일의 이미지를 첨부하거나 프롬포트를 입력할 수 있습니다. Runway에서 제공하는 Preset 스타일 중 하나를 선택해 영상을 만들 수 있습니다.
  • 미리보기 (Free preview) : 설정을 조정하기 전에 한 번에 4개의 각각 다른 preview를 미리 볼 수 있습니다.
  • 비디오 생성 (Generate Video) : 생성한 비디오의 재생 속도를 조절하거나 직접 다운로드할 수 있습니다. 무료 버전으로는 4초 길이, Standard 및 Pro 유료 버전으로는 최대 15초까지 비디오를 생성할 수 있습니다. 
  • 텍스트 -> 이미지 생성 (Text to image) : 작성한 프롬포트를 통해 이미지를 생성할 수 있습니다.

 

 

 

Gen-2 : Text to Video, Image to Video

 

Gen 2는 Gen 1의 기능을 확장하여, 더 다양한 입력 소스를 통해 비디오를 생성할 수 있는 기능을 추가한 모델입니다. Gen 2는 텍스트 및 이미지를 기반으로 비디오를 생성할 수 있습니다.

 

image3
출처 : runway 공식 사이트

 

주요 기능은 다음과 같습니다.

      • 텍스트 -> 비디오 생성 (Text to video) : 작성한 프롬포트를 통해 비디오를 생성할 수 있습니다.
      • 이미지 -> 비디오 생성 (Text to video) : 이미지를 통해 비디오를 생성할 수 있습니다. 텍스트와 이미지를 같이 등록해 비디오를 생성하는 것도 가능합니다.
      • 모션 브러시 (Motion Brush) : 비디오 내 특정 영역이나 주제에 의도된 움직임을 추가할 수 있습니다. 오브젝트에 자연스러운 움직임을 추가하여 더욱 생동감 있는 영상을 제작할 수 있습니다.
      • 향상된 품질: 더 정교하고 현실감 있는 비디오 생성이 가능합니다. 향상된 AI 성능으로 고화질 비디오 생성이 가능합니다.

 

 

 

Gen-3 Alpha

 

Gen 3는 Runway의 최신 테스트 모델로 현재 유료 구독자에게만 제공하고 있습니다. 멀티모달 트레이닝을 통해 이전 버전보다 높은 선명도, 일관성, 모션감을 제공하며, 더욱 정교한 동작을 구현합니다.

영상 저작권 이슈에 대해 Runway는 Gen-3 Alpha는 새롭게 개선된 내부 시각 모더레이션 시스템과 C2PA 출처 표준이 포함된다고 안내하고 있습니다. C2PA는 콘텐츠의 출처와 무결성을 검증하기 위한 표준을 개발하는 단체입니다. 이 표준은 디지털 콘텐츠의 출처를 추적하고, 콘텐츠가 생성되고 편집된 과정을 투명하게 공개하는 것을 목표로 합니다.

출처 : runway 공식 사이트

 

 

 

 

사용 범위 Usage rights

Runway 에서는 공식적으로 다음과 같이 안내하고 있습니다.

 

'As a user on any of our plans (Free, Standard, Pro, or Unlimited) you retain complete commercial rights to all content generated or edited using Runway. You're 100% free to use any content you create using Runway both commercially or non-commercially, and all copyright for your creations and generations is held by you.'

 

Runway의 모든 요금제(무료, 표준, 프로, 무제한)를 사용하는 사용자는 Runway를 통해 생성하거나 편집한 콘텐츠에 대한 상업적 권리를 완전히 보유합니다. 생성한 콘텐츠는 상업적 또는 비상업적으로 자유롭게 사용할 수 있으며, 모든 저작권은 사용자에게 귀속됩니다.

 

728x90