Runway Gen-3 런웨이 젠3 AI툴로 이미지를 움직이는 동영상 만들기

텍스트나 영상으로 익히는 IT 지식과 기술 말고,

직접 툴을 사용해 보고 경험해 보자는 생각을 가지고 만들어봤다.

 

텍스트와 이미지 사진을 이용해 움직이는 동영상을 만들어주는 AI툴  Runway Gen-3 런웨이 젠3.

회원가입을 하면 무료로 주는 크레딧 내에서 4초짜리의 영상을 만들 수 있다.

 

1. Runway 가입

좌측에는 툴을 이용해 만든 영상들이 나오는데, 정말 생동감 있게 잘 만들어져 있었다.

나는 구글을 이용해 회원가입을 진행했다.

 

 

 

2. Home화면에서 'Get Started' 진입

해당 포스팅을 쓰는 시점에는 Gen-3 젠3 툴이었다. 버튼을 클릭해 영상 작업하는 스페이스로 넘어간다.

 

 

 

3. 움직이는 영상 작업

1번 - 이미지 업로드 영역, 움직이는 영상으로 만들고자 하는 이미지를 업로드한다.

2번 - 텍스트 입력 영역, 업로드한 이미지를 구체적으로 어떻게 움직이게 할지 입력한다.

3번 - 움직임 옵션 설정 영역, 이미지 움직임을 세부적으로 옵션 설정할 수 있다. (아래 내용 참고)

4번 - 움직임 감도 설정 영역, 숫자를 높게 설정할수록 동적으로 움직인다. (단 왜곡이 심할 수 있으니 조절 필요)

 

 

 

4. 움직임 옵션 설정

1번 - Fixed seed, 영상 속 물체 움직임이 작아지는 설정 (동물이나 사람은 왜곡이 심해지므로 체크하는 편이 좋다.)

2번 - Interpolate(Smooth out your frames), 움직임을 자연스럽게 만들어주는 설정

 

움직이게 만들고 싶은 사진이 무엇이 있을까 고민을 하다가 돌아가신 할머니 할아버지 사진으로 작업했다.

아마도 움직여졌을 때 가장 큰 울림이 있는 건 돌아가신 분들 사진이 아닐까 생각이 든다.

 

텍스트 명령은 'Grandmother and grandfather smile brightly.'

할머니 할아버지가 환하게 미소를 짓는다.

 

[Generate 4s] 버튼을 클릭하면 우측에서 내가 명령한 내용대로 로딩이 보이며 작업이 완료된다.

 

아래는 작업 완성본.

처음엔 '할머니 할아버지가 서로 마주 보며 웃는다.'로 명령했으나, 얼굴 왜곡이 너무 심해서 다른 분 인줄 알았다..

이후 움직임 감도와 Interpolate 설정 값을 조절했는데도 왜곡이 나아지질 않았다ㅠㅠ

내가 이미지 선택을 잘못한 건지, 명령을 못한건지, 기술이 아직까진 이런 건지... 조금 더 공부가 필요해 보인다.