Gemini Omni 프롬프트 가이드: 시도해 볼 5가지 비디오 워크플로우 + 8가지 프롬프트

대부분의 AI 비디오 워크플로우는 간단한 아이디어에서 시작합니다:

이미지를 업로드하고 어떻게 움직여야 하는지 설명하세요.

Gemini Omni는 훨씬 더 광범위한 작업을 수행할 수 있습니다.

정지 이미지로 시작하거나, 기존 비디오를 편집하거나, 하나의 비디오를 모션 참조 자료로 사용하거나, 다양한 참조 자산을 결합하거나, 자연어 지시를 통해 동일한 결과를 지속적으로 변경하며 수정할 수 있습니다.

이는 Gemini Omni 프롬프트에 대해 생각하는 방식을 변화시킵니다.

단순히 다음과 같이 묻는 대신:

캐릭터가 어떻게 움직여야 할까?

더 나은 질문은 다음과 같습니다:

내가 이미 보유한 자료는 무엇이며, Gemini Omni로 정확히 무엇을 하고 싶은가?

이 가이드에서는 이미지 투 비디오, 오브젝트 애니메이션, 비디오 편집, 모션 참조, 대화형 편집을 포함한 다섯 가지 다양한 워크플로우를 살펴봅니다.

Gemini Omni 프롬프트의 차별점은 무엇인가?

1. 이미지 투 비디오는 인물 전용이 아닙니다

첫 번째 프레임에는 인물이 포함될 수 있지만, 제품, 미니어처 모델, 일러스트레이션, 수공예품, 기계 구조물 또는 종이 조형물도 포함될 수 있습니다.

유용한 프롬프트 구조는 다음과 같습니다:

무엇이 움직이는가 → 어떻게 움직이는가 → 어떤 순서로 움직이는가 → 어디에서 끝나는가

2. 모든 것을 다시 생성하지 않고 기존 영상을 편집할 수 있습니다

때로는 원본 영상이 이미 훌륭합니다.

단 하나의 시각 효과를 추가하거나, 특정 객체를 교체하거나, 조명을 변경하거나, 카메라 움직임을 수정하고 싶을 수도 있습니다.

이러한 작업에는 다음과 같은 구조가 유용합니다:

유지 → 변경 → 타이밍 → 보호

목표는 수정하지 않아야 할 부분과 변경해야 할 부분을 명확하게 구분하는 것입니다.

3. 다양한 레퍼런스로 서로 다른 요소를 제어할 수 있습니다

레퍼런스 이미지는 외관을 정의할 수 있습니다.

레퍼런스 영상은 동작을 정의할 수 있습니다.

다른 이미지는 질감이나 스타일을 정의할 수 있습니다.

오디오는 타이밍이나 리듬을 정의할 수 있습니다.

중요한 것은 모든 것을 업로드하고 모델이 이해하기를 바라는 대신, Gemini Omni에게 각 레퍼런스가 담당하는 역할을 명확히 지시하는 것입니다.

4. 모든 내용을 하나의 프롬프트에 작성할 필요는 없습니다

첫 번째 결과가 이미 대부분 정확하다면, 이를 기반으로 계속 진행하세요.

예를 들어:

나머지는 모두 그대로 유지하되, 창문 조명을 더 따뜻하게 만드세요.

그런 다음:

현재 조명은 유지한 채, 시계 방향으로缓慢하게 카메라를 회전시키세요.

이는 복잡한 프롬프트를 처음부터 다시 구성하는 것보다 종종 더 잘 제어할 수 있는 방법입니다.

Gemini Omni 프롬프트 실용 예시 5가지

예시 1 — 애니메이션 캐릭터가 나비를 잡는 장면

복잡한 객체 변형 대신 간단한 애니메이션부터 시작해 보겠습니다.

이 예시는 캐릭터 한 명, 움직이는 물체 하나, 명확한 동작 하나를 사용합니다. 이렇게 하면 제어가 용이하며, Gemini Omni의 이미지 투 비디오 생성 기능을 테스트하기에 좋은 첫 번째 사례가 됩니다.

프롬프트	출력 결과
작은 잔디밭에 서 있는 귀여운 심플 애니메이션 캐릭터, 스타일화된 만화 디자인, 둥근 머리, 작은 몸통, 짧은 팔다리, 부드럽고 친근한 표정, 단순한 노란색 셔츠와 파란색 반바지 착용. 작고 다채로운 나비가 캐릭터의 오른쪽 위 약간 높은 곳을 날고 있으며, 캐릭터의 몸과 명확하게 분리되어 있습니다. 밝고 부드러운 낮 빛, 깨끗한 푸른 하늘, 단순한 초록색 잔디, 최소한의 장난스러운 환경, 매력적인 2D 애니메이션 스타일, 깔끔한 형태, 일관된 캐릭터 디자인, 전체 캐릭터가 선명하게 보임. 16:9 비율, 텍스트 없음, 로고 없음, 워터마크 없음.

Gemini Omni 비디오 프롬프트:

효과적인 이유: 이 프롬프트는 서 있는 상태에서 나비를 잡는 상태로 즉시 전환하지 않습니다. 대신 Gemini Omni에게 짧고 이해하기 쉬운 동작 시퀀스를 제공합니다:

바라보기 → 나비 접근 → 앞으로 한 걸음 → 손 들어 올리기 → 잡기 → 잠시 멈춤

이는 여러 움직이는 부분이나 복잡한 물리적 상호작용이 포함된 장면보다 생성이 훨씬 쉽습니다.

또한 두 가지 움직임을 명확하게 구분합니다: 나비가 캐릭터를 향해 움직이고, 캐릭터는 이에 반응합니다.

변경 가능한 요소: 나비를 낙엽, 종이 비행기, 비누 방울 또는 작게 빛나는 별로 대체할 수 있습니다. 배경 환경도 잔디밭에서 단순한 공원, 정원 길 또는 만화풍 뒷마당으로 변경할 수 있습니다. 더 안정적인 결과를 얻으려면 기본 구조를 동일하게 유지하세요: 캐릭터 한 명 + 움직이는 물체 하나 + 짧은 동작 하나.

예시 2 — 폴딩 선글라스 제품 모션

이 워크플로우는 다시 이미지 투 비디오를 사용하지만, 이번에는 제품의 움직임을 제어하는 작업입니다.

첫 번째 프레임에는 접힌 상태의 선글라스 한 쌍이 표시됩니다.

Gemini Omni 비디오 프롬프트:

작동 원리: 실제 기계적 순서를 설명하면 오브젝트 애니메이션을 더 쉽게 제어할 수 있습니다:

힌지 이동 → 템플 펼침 → 제품 회전 → 최종 상태

이는 단순히 다음과 같이 말하는 것보다 훨씬 명확합니다:

제품에 생기를 불어넣으세요.

변경 가능한 사항: 동일한 접근 방식은 폴딩 데스크 램프, 컴팩트 카메라 또는 기계식 데스크 장난감에도 적용할 수 있습니다. 먼저 실제로 움직여야 하는 물리적 부품을 식별하세요.

예시 3 — 스케이트보드 비디오에 애니메이션 트레일 추가하기

이제 비디오 생성에서 기존 비디오 편집으로 전환합니다.

Assume you already have a skateboard clip with turns and jumps.

원본 클립을 Movmix의 Gemini Omni AI 비디오 에디터에 업로드한 후, 원하는 변경 사항만 설명하세요.

Gemini Omni 편집 프롬프트:

작동 원리: 이는 유용한 편집 구조를 따릅니다:

유지 → 추가 → 타이밍 → 보호

첫 번째 지시사항은 원본 영상을 보호합니다.

두 번째는 새로운 시각 효과를 정의합니다.

세 번째는 효과가 나타나고 사라져야 하는 시점을 설명합니다.

마지막 줄은 변경되지 않아야 할 모든 요소를 다시 강조합니다.

변경 가능한 사항: 모션 트레일을 분필 같은 자국, 종이 오리기 형태, 또는 잉크 스타일의 물방울로 대체하세요. 효과가 관련 움직임 동안에만 나타나도록 타이밍 규칙을 유지하십시오.

예시 4 — 참조 비디오에서 모션 전환

이 워크플로우에는 두 가지 소스 자료가 필요합니다:

참조 이미지: 수제 골판지 로봇
참조 비디오: 간단한 로봇 팔 움직임

해당 자산이 아직 없으므로 먼저 이를 생성합니다.

프롬프트	출력
깨끗한 작업대 위에 서 있는 수제 골판지 로봇, 단순한 상자형 몸통, 테이프로 연결된 관절이 보이는 articulated 골판지 팔, 직사각형 머리, 페인트로 그린 종이 디테일, 자연스러운 크라프트 골판지 질감. 배경에는 작은 공예 도구들이 부드럽게 흐려져 있고, 밝은 자연광이 비추며, 리얼한 수제 물건 사진 스타일, 전신 뷰, 중앙 구도. 16:9, 텍스트 없음, 로고 없음, 워터마크 없음.

다음으로, 간단한 모션 참조 비디오를 생성합니다.

The movement is intentionally simple:

들어 올리기 → 굽히기 → 회전하기 → 일시 정지 → 내리기

이렇게 하면 참조 자료를 해석하기가 더 쉬워집니다.

두 자산이 준비되면 Movmix의 Gemini Omni Reference to Video 워크플로우에 업로드하세요.

Gemini Omni 참조 프롬프트:

효과적인 이유: 두 가지 참고 자료에 서로 다른 역할이 부여됩니다:

이미지 = 외관
영상 = 모션

모션에는 참고 영상만 사용하세요라는 문장은 특히 중요합니다. 이는 모션 소스에서 산업적인 외관이나 배경이 우연히 전달될 가능성을 줄여주기 때문입니다.

예시 5 — 대화를 통해 동일 영상 편집하기

이 예시는 또 다른 접근 방식을 보여줍니다.

하나의 긴 프롬프트를 작성하는 대신, 여러 차례의 편집을 통해 결과를 만들어냅니다.

먼저 간단한 기본 영상이 필요합니다.

건축 모형 이미지를 생성하는 것으로 시작하세요.

이제 이를 의도적으로 단순한 기본 영상으로 변환하세요.

기본 영상 프롬프트:

이 기본 영상은 의도적으로 사건 없이 평온하게 구성되었습니다.

이는 편집 과정을 이해하기 쉽게 만들어 줍니다.

결과는 명확한 단계로 전개됩니다:

기본 영상 → 조명 켜기 → 조명 색상 변경 → 카메라 움직임 추가

작동 원리: 각 편집 단계에서는 이전 결과를 명시적으로 보호하면서 한 가지 주요 요소만 변경합니다.

이 워크플로우에서 매우 유용한 문구는 다음과 같습니다:

나머지는 모두 그대로 유지하세요.

이는 새로운 지시가 전체 영상을 다시 디자인하는 구실이 되지 않아야 한다는 점을 모델에 전달합니다.

어떤 Gemini Omni 프롬프트 구조를 사용해야 할까요?

작업	입력	프롬프트 초점
이미지 to 비디오	이미지	액션 + 시퀀스 + 카메라 + 최종 상태
비디오 효과 추가	비디오	유지 + 추가 + 타이밍 + 보호
기존 비디오 편집	비디오	나머지는 모두 유지 + 구체적인 변경
모션 레퍼런스	이미지 + 비디오	외형 레퍼런스 + 모션 레퍼런스
멀티모달 생성	이미지 + 비디오 + 오디오	각 레퍼런스가 제어하는 요소 정의
대화형 편집	기존 결과물	이전 결과물 유지 + 새로운 편집 1회 추가
스타일 변환	비디오 + 스타일 레퍼런스	모션 유지 + 시각적 스타일 교체

핵심은 간단합니다:

작업 유형에 따라 프롬프트 구조가 달라져야 합니다.

모든 워크플로우에 동일하게 효과적인 단일 Gemini Omni 프롬프트 공식은 존재하지 않습니다.

직접 시도해 볼 만한 Gemini Omni 프롬프트 8가지

이 아이디어들은 의도적으로 완성된 결과물을 제공하지 않습니다.

프롬프트를 복사하여 테스트하고, Gemini Omni가 지시사항을 어떻게 해석하는지 확인해 보세요.

1. 종이학이 날아오르다

2. 포스터 요소가 페이지를 벗어나다

3. 미니어처 타운을 지나가는 장난감 열차

4. 음악에 맞춰 점등되는 빌딩 조명

5. 스케치를 실제 모션으로 변환하기

6. 자전거 클립에 손그림 효과 추가하기

7. 동물의 움직임을 종이 조형물에 적용하기

8. 하나의 객체만 교체하고 나머지는 그대로 유지하기

Gemini Omni 프롬프트 작성 전, 한 가지 질문부터 하세요

다음과 같이 묻지 마세요:

프롬프트를 더 길게 만들려면 어떻게 해야 하나요?

대신 이렇게 물어보세요:

지금 생성, 편집, 아니면 참조 중 어떤 작업을 하고 있나요?

생성 중이라면, 어떤 일이 일어나야 하는지 설명하세요.

편집 중이라면, 무엇을 유지해야 하고 무엇을 변경해야 하는지 설명하세요.

참조 자료를 사용하는 경우, Gemini Omni에게 외관, 모션, 타이밍 또는 스타일을 제어하는 자산이 정확히 무엇인지 알려주세요.

현재 결과가 이미 근접하다면 모든 것을 다시 만들지 마세요.

다음과 같이 집중적인 지시를 이어가세요:

다른 부분은 그대로 유지하고 ...만 변경하세요.

모든 가능한 지시를 하나의 거대한 프롬프트에 담으려고 하는 것보다 Gemini Omni를 사용하는 더 좋은 방법입니다.