비디오 AI 참조: 이미지와 비디오를 함께 사용하는 방법

아름다운 제품 이미지를 만들고 원하는 카메라 움직임이 정확히 담긴 광고 영상을 발견했다고 상상해 보세요.

목표는 간단합니다. 이미지 속 제품은 그대로 유지하되, 영상에서 카메라 움직임을 차용하는 것입니다.

쉽게 들리죠?

항상 그렇지는 않습니다.

AI 비디오 생성기에 단순히 "이 제품을 참조 영상처럼 움직여 줘"라고 지시하면, 제품의 외관이 바뀌거나 배경이 변경될 수 있으며, 심지어 원본 클립의 객체가 삽입될 수도 있습니다.

문제는 참조 자료 자체에 있는 것이 아닙니다. 모델에게 각 참조 자료가 어떤 부분을 제어해야 하는지 명확히 설명하지 않았기 때문입니다.

Movmix Reference to Video를 사용하면 크리에이터는 이미지, 비디오 클립 및 기타 참조 자료를 지원되는 조합으로 활용하여 더 구체적인 창작 방향을 제시할 수 있습니다.

이 가이드에서는 기본적인 캐릭터 대체를 넘어선 세 가지 실용적인 워크플로우를 살펴보겠습니다.

• 카메라 모션 참조를 활용한 프리미엄 향수 광고 제작
• 움직이는 조명 참조를 활용한 패션 포트레이트 제작
• 여러 참조를 결합한 빈티지 극장 오프닝 장면 제작

각 예시는 참조 자료들이 서로 충돌하지 않도록 하면서 Reference to Video AI를 활용하는 다양한 방법을 보여줍니다.

1. Reference to Video AI란 무엇인가?

Reference to Video AI는 기존 시각 또는 오디오 자료를 사용하여 새로운 비디오 제작을 안내하는 비디오 생성 워크플로우입니다.

기본적인 이미지 투 비디오(image-to-video) 워크플로우와 달리, 정적 이미지 하나만 제공하고 나머지를 텍스트로 설명하는 방식에 제한되지 않습니다.

선택한 모델에 따라 여러 유형의 참조 자료를 조합하고 각각에 다른 목적을 할당할 수 있습니다.

참조 유형	제공 가능한 요소	창작 목적
참조 이미지	주제 외관, 의상, 소재, 환경	최종 영상에 포함되어야 할 요소를 정의합니다.
참고 영상	모션, 카메라 움직임, 액션 시퀀스	장면이 어떻게 움직여야 하는지 안내합니다.
참고 오디오	음악, 리듬, 환경음	지원되는 경우 사운드 방향을 제공합니다.
영상 프롬프트	지침 및 우선순위	무엇을 유지하고 무엇을 변경할지 설명합니다.

가장 중요한 규칙은 다음과 같습니다:

모든 참고 자료가 최종 영상의 모든 부분을 제어하도록 요구하지 마십시오.

향수 병 이미지와 도자기 꽃병 주위를 카메라가 이동하는 영상을 업로드했다고 가정해 보겠습니다.

해당 영상에서 카메라 움직임만 원할 수 있으며, 꽃병, 그 소재 또는 배경은 원하지 않을 수 있습니다.

따라서 프롬프트는 이 구분을 명확히 해야 합니다:

이미지는 제품 외관을 제어하고, 영상은 카메라 모션 참고 자료를 제공합니다.

명확한 참고 자료 할당은 충돌을 줄이고 생성 프로세스를 더 쉽게 관리할 수 있게 해줍니다. 다만 제어 정도는 선택한 모델에 따라 다릅니다.

2. 더 나은 참조 자료 준비 방법

예시를 살펴보기 전에 기억해 둘 가치가 있는 점이 있습니다:

참조 자료가 많다고 해서 항상 더 나은 결과가 나오는 것은 아닙니다.

구도가 서로 충돌하는 여러 제품 사진을 업로드한 뒤, 완전히 다른 카메라 움직임이 담긴 세 개의 비디오를 추가한다고 상상해 보세요.

모델에 풍부한 정보를 제공하고는 있지만, 어떤 정보가 가장 중요한지에 대한 방향성은 거의 제시하지 않는 셈입니다.

더 나은 접근법은 소수의 참조 자료를 선택하고 각각에 구체적인 역할을 부여하는 것입니다.

스스로에게 다음 세 가지 질문을 던져 보세요.

1. 최종 비디오에 무엇이 나타나야 하는가?

주요 피사체의 선명한 이미지를 선택하세요. 이상적으로는 불필요한 가림 없이 전체 구조가 잘 드러나는 사진이어야 합니다.

2. 참조 비디오에서 정확히 어떤 요소를 차용하고자 하는가?

캐릭터의 동작, 카메라 줌인, 조명 전환, 혹은 특정 액션의 타이밍 중 무엇을 원하는가요?

"이 비디오를 따르세요"라고 막연히 지시하기보다, 참조하려는 구체적인 요소를 명확히 지정하세요.

3. 반드시 유지되어야 할 요소는 무엇인가?

제품 형태, 의상, 장면 배치, 재질, 주요 오브젝트 등 중요한 디테일을 목록으로 정리하세요.

이러한 결정들이 명확해지면 최종 비디오 프롬프트 작성은 훨씬 수월해집니다.

세 가지 다양한 크리에이티브 활용 사례를 살펴보겠습니다.

예시 1: 카메라 모션 레퍼런스를 활용한 프리미엄 향수 광고 제작

기법: 이미지는 제품의 외관을 제어하고, 비디오는 카메라 움직임을 제어합니다.

첫 번째 예시는 럭셔리 향수 광고입니다.

마지막 장면에는 천연석 받침대 위에 놓인 앰버 색상의 향수 병이 등장합니다. 카메라는 왼쪽에서 오른쪽으로 천천히 이동하며 유리 표면과 금속 캡에 반사되는 빛의 미묘한 변화를 드러냅니다.

병이 회전할 필요는 없으며, 복잡한 액체 효과도 필요하지 않습니다.

필요한 레퍼런스 자료는 두 가지뿐입니다:

• 레퍼런스 이미지 A: 향수 병의 외관을 정의합니다.
• 레퍼런스 비디오 B: 부드러운 수평 방향의 광고용 카메라 움직임을 제공합니다.

먼저 제품 이미지를 생성합니다.

레퍼런스 이미지 프롬프트	출력 결과
16:9 가로형 프리미엄 제품 사진. 우아한 투명 앰버 글라스 향수 병이 밝은 천연석 받침대 중앙에 놓여 있습니다. 병은 부드럽게 둥글게 처리된 모서리와 세련된 금속 캡, 내부의 따뜻한 빛깔의 앰버색 액체를 갖춘 미니멀리스트 사각형 디자인입니다. 깔끔하고 현대적인 상업 사진 스튜디오 배경을 사용합니다. 부드러운 골든 사이드 조명이 투명한 유리, 제품의 실루엣 및 금속 반사를 강조합니다. 전체 병이 선명하게 보이도록 하고 주변에 충분한 여백을 확보하세요. 사실적인 럭셔리 제품 사진 스타일이며, 텍스트, 로고, 워터마크는 포함하지 않습니다.

지금 만들기

최종 비디오 프롬프트

향수 이미지와 카메라 모션 레퍼런스 비디오를 업로드한 후, 각자의 역할을 명확히 정의하세요.

기능: 정적인 제품 이미지와 별도의 참조 비디오에서 추출한 카메라 움직임을 결합하여 세련된 광고 스타일의 샷을 생성합니다.

추천 용도: 제품 광고, 브랜드 캠페인, 이커머스 동영상.

주의 사항: "참조 비디오의 모든 요소를 복사하라"와 같은 지시는 피하세요. 그렇지 않으면 모델이 원래の花병이나 배경을 향수 광고에 포함시킬 수 있습니다.

핵심 포인트: 참조 비디오의 피사체가 최종 결과물의 피사체와 반드시 일치할 필요는 없습니다. 중요한 것은 비디오 중 사용하려는 부분을 명확히 지정하는 것입니다.

4. 예시 2: 움직이는 조명을 참조하여 패션 포트레이트 만들기

기법: 참조 비디오는 캐릭터의 움직임뿐만 아니라 환경 변화에도 활용될 수 있습니다.

두 번째 예시로는 패션 포토그래피로 넘어가 보겠습니다.

모델은 비교적 정지한 상태로 유지하면서, 부드러운 햇빛이 그녀의 얼굴과 의복 위로 점차 이동하도록 합니다.

이 효과는 복잡한 신체 움직임 없이도 세련된 편집 atmosfer를 연출합니다.

이는 참조 자료를 바라보는 또 다른 관점입니다:

이미지는 모델과 환경을 설정하고, 비디오는 변화하는 조명의 참조 자료로 사용됩니다.

참조 이미지 프롬프트	출력 결과
16:9 가로형 프리미엄 패션 에디토리얼 사진. 밝고 현대적인 미술관 안에 서 있는 아름다운 금발 여성. 미니멀한 크림색 롱 코트를 입고 있으며, 우아한 이목구비, 자연스럽게 흐르는 머리카락, 편안하면서도 자신감 있는 표정을 지니고 있습니다. 몸은 카메라를 향해 약간 돌려져 있습니다. 미술관은 대형 천장 창문, 깔끔한 건축 라인, 연한 석재 벽으로 구성되어 있습니다. 모델의 머리부터 무릎까지 선명하게 프레임에 담습니다. 부드럽고 균일한 자연광, 세련된 에디토리얼 구도, 리얼istic한 패션 포토그래피, 텍스트 없음, 로고 없음, 워터마크 없음.

지금 만들기

조명 참조 비디오 준비 방법

이를 위해 별도의 패션 비디오가 필요하지는 않습니다.

대신, 햇빛이 벽면을 따라 점차 이동하는 모습을 보여주는 간단한 건축물 클립을 준비하세요.

최종 영상 프롬프트

기능: 정적인 패션 포트레이트와 별도의 조명 레퍼런스를 결합하여 미묘하고 분위기 있는 영상을 제작합니다.

추천 용도: 패션 에디토리얼, 브랜드 비주얼, 포트레이트 사진, 소셜 미디어 콘텐츠.

주의 사항: 극적인 캐릭터 움직임, 빠른 카메라 모션, 강렬한 조명 변화를 동시에 요청하지 마십시오.

이 예시의 시각적 초점은 빛입니다. 다른 모든 요소는 비교적 안정적으로 유지되어야 합니다.

또한, 참고 영상이 모든 모델에서 동일하게 정밀한 조명 제어를 제공하지는 않습니다. 이는 정확한 조명 패턴의 완전한 복제가 아니라, 가이드라인 기반의 창의적 워크플로우로 접근해야 합니다.

핵심 요약: 참고 영상이 전체 장면을 설명할 필요는 없습니다. 특정 시각적 요소 하나에 대한 방향성을 제시하는 데 활용할 수 있습니다.

5. 예시 3: 빈티지 극장 오프닝을 위한 다중 레퍼런스 결합

기법: 여러 참고 자료에 명확한 역할을 부여합니다.

세 번째 예시는 빈티지 극장 내부의 시네마틱 오프닝 시퀀스입니다.

장면은 완전히 닫힌 무거운 빨간 벨벳 커튼으로 시작됩니다.

커튼이 천천히 열리며 따뜻한 황금빛 조명으로 비춰진 빈 무대가 드러납니다.

선택한 모델이 오디오 레퍼런스를 지원한다면, 오프닝 움직임과 어울리는 짧은 오케스트라 크레센도(점점 강해지는 연주)를 포함할 수도 있습니다.

이 예시는 더 많은 참고 자료를 사용하지만, 각각의 자료에는 명확하게 정의된 역할이 있습니다.

자료	콘텐츠	목적
참고 이미지 A	닫힌 커튼이 있는 빈티지 극장	초기 외관 및 극장 디자인
참고 이미지 B	커튼 뒤의 무대	무대 구조 및 조명
참고 영상 C	열리는 붉은 커튼	커튼 움직임
오디오 참고 D (선택 사항)	짧은 오케스트라 크레센도	오프닝 음악 분위기

참고 이미지 프롬프트	출력
참고 이미지 A: 16:9 가로 구도의 웅장한 빈티지 극장 내부. 무대 중앙 전체에 깊고 진한 빨간색 벨벳 커튼이 완전히 닫혀 있습니다. 우아한 금색 조각 기둥이 양쪽을 장식하며, 무대 위에는 정교한 금색 건축 디테일이 있습니다. 따뜻하고 부드러운 극장 조명이 비추고 있습니다. 카메라는 무대를 정면에서 대칭적인 와이드 구도로 바라보며, 커튼 전체와 무대 가장자리를 선명하게 보여줍니다. 사실적인 시네마틱 사진 스타일로, 풍부한 원단 질감과 건축 디테일을 강조합니다. 인물, 텍스트, 로고, 워터마크는 포함되지 않습니다.
참고 이미지 B: 참고 이미지 A와 동일한 빈티지 극장 건축 양식, 무대 비율 및 카메라 앵글을 보여주는 16:9 가로 구도입니다. 진한 빨간색 벨벳 커튼이 양쪽으로 완전히 젖혀져 있어, 우아한 짙은 나무 디테일과 따뜻한 금색 무대 조명이 비치는 빈 중앙 무대가 드러납니다. 양쪽의 화려한 금색 기둥과 무대 위의 장식적 건축 요소를 유지합니다. 무대 위에는 인물이나 주요 소품이 없습니다. 고정된 정면 카메라, 대칭적인 와이드 구도, 사실적인 시네마틱 사진 스타일이며, 텍스트, 로고, 워터마크는 포함되지 않습니다.

두 이미지의 무대 구성이 눈에 띄게 다르다면, Movmix AI Image to Image를 사용하여 두 번째 이미지를 수정함으로써 두 참조 이미지가 더 일관된 건축 디자인과 시점(뷰잉 앵글)을 공유하도록 할 수 있습니다.

최종 비디오 프롬프트

기능: 장면 이미지, 모션 참조 및 선택적 오디오를 결합하여 단일 비디오의 시각적 구조와 타이밍을 안내합니다.

최적 활용 분야: 영화 예고편, 브랜드 오프닝 영상, 극장 프로모션, 이벤트 비디오.

주의 사항: 모든 비디오 모델이 오디오 참조를 지원하지는 않습니다. 자료를 업로드하기 전에 항상 사용 가능한 입력 유형과 참조 제한 사항을 확인하세요.

사용 중인 모델이 이미지와 비디오만 지원한다면, 먼저 시각적 시퀀스를 생성한 후 편집 단계에서 음악을 추가하세요.

핵심 요약: 다중 참조 생성의 목표는 가능한 많은 자료를 업로드하는 것이 아닙니다. 각 참조 자료에 구체적인 역할을 부여하는 것입니다.

6. Movmix에서 '참조 이미지/비디오를 활용한 비디오 생성' 사용 방법

세 가지 예시는 서로 다른 주제를 다루지만, 워크플로우는 동일한 기본 구조를 따릅니다.

1단계: 적합한 모델 선택

Movmix의 '참조 기반 비디오 생성(Reference to Video)' 도구를 열고 현재 사용 가능한 모델 및 참조 입력 옵션을 검토하세요.

모델마다 지원되는 참조 이미지, 비디오, 오디오의 조합이 다를 수 있습니다.

모델을 선택하기 전에 다음 간단한 질문을 던져보세요:

이 모델이 내 특정 프로젝트에 필요한 참조 자료를 받아들일 수 있는가?

예를 들어, 두 개의 이미지와 하나의 비디오를 사용하는 워크플로우에는 해당 입력을 지원하는 모델이 필요합니다. 모든 모델이 동일한 기능을 제공한다고 가정하지 마세요.

2단계: 참조 자료 준비 및 업로드

업로드하기 전에 자료를 정리하세요.

향수 예시의 경우:

• 참조 A: 향수 제품 이미지
• 참조 B: 수평 카메라 모션 영상

극장 예시의 경우, 두 개의 장면 이미지와 커튼 모션 참조 자료가 필요합니다. 선택한 모델이 오디오를 지원하는 경우 오디오도 포함할 수 있습니다.

3단계: 비디오 프롬프트에서 역할 지정

이는 여러 참조 자료를 사용할 때 특히 중요합니다.

"업로드된 모든 자료를 사용하여 프리미엄 상업용 동영상을 제작하세요."와 같은 모호한 지시는 피하세요.

"업로드된 모든 자료를 사용하여 프리미엄 상업용 동영상을 제작하세요."

대신 더 명확한 구조를 사용하세요:

재사용 가능한 참조-비디오 프롬프트 템플릿:

참조 이미지 A: 최종 피사체의 외관, 색상, 재질 및 전체 구조를 정의하는 데 사용합니다.
참조 영상 B: 지정된 모션이나 카메라 움직임을 안내하는 용도로만 사용합니다. 관련 없는 피사체나 배경 요소는 복사하지 마세요.
최종 비디오: 의도한 액션, 카메라 동작 및 시각적 시퀀스를 설명합니다.
유지 사항: 변경되지 않아야 할 피사체 디테일, 배경 요소 및 중요한 객체를 명시합니다.

이러한 일반적인 설명을 프로젝트에 특정한 세부 정보로 대체하세요.

4단계: 결과 생성 및 검토

동영상을 생성한 후, 전체적인 시각적 매력 이상으로 결과를 평가하세요.

각 참조 이미지가 의도한 역할을 제대로 수행했는지 확인하세요.

예시	확인 사항
향수 광고	올바른 제품이 표시되었나요? 카메라가 의도한 움직임을 따라갔나요?
패션 포트레이트	모델의 일관성이 유지되나요? 조명이 자연스럽게 변하나요?
빈티지 극장	커튼이 올바르게 열리나요? 무대의 시각적 일관성이 유지되나요?

뭔가 잘못 보인다면, 프롬프트 전체를 다시 작성하기 전에 어떤 참조 이미지가 문제를 일으켰는지 파악하세요.

모든 참조 이미지를 한 번에 변경하면 문제 해결이 훨씬 어려워집니다.

7. 일반적인 참조 이미지 기반 동영상 제작 문제 및 해결 방법

문제 1: 참조 동영상의 객체가 최종 결과물에 나타남

예를 들어, 향수 광고에 모션 참조용 동영상에서 사용된 세라믹 꽃병이 의도치 않게 포함될 수 있습니다.

모델이 두 가지 소스의 정보를 혼합하고 있을 수 있습니다.

수정 프롬프트:

최종 장면에는 참조 이미지 A에 표시된 제품만 포함되어야 합니다. 제품의 원래 외관을 유지하세요. 참조 동영상 B는 카메라 움직임 안내용으로만 사용하십시오. 동영상 B의 객체, 배경 또는 기타 시각적 요소를 포함하지 마십시오.

문제 2: 주요 피사체의 외관이 변경됨

아마도 향수 병의 뚜껑이나 전체적인 비율이 참조 이미지와 더 이상 일치하지 않을 수 있습니다.

수정 프롬프트:

참조 이미지 A에서 피사체의 원래 구조, 색상, 재질, 비율 및 주요 디테일을 엄격하게 유지하세요. 요청된 카메라 움직임과 환경 변화만 수행하십시오. 피사체를 다시 디자인하지 마십시오.

문제 3: 서로 다른 참조 자료 간 충돌

예를 들어, 한 이미지는 고정된 정면 구도를 제시하는 반면, 다른 동영상은 빠른 회전 카메라 움직임을 보여줄 수 있습니다.

You need to establish priorities.

최종 구도를 결정할 참조 자료를 선택한 후, 동영상에서 얼마나 많은 움직임을 차용할지 지정하세요.

모델이 계속 어려움을 겪다면 불필요한 참조 자료를 제거하고 작업을 단순화하세요.

문제 4: 최종 모션이 참조 영상과 일치하지 않음

참조 영상은 모션 정보를 제공하지만, 프레임 단위의 정확한 재현을 보장하지는 않습니다.

특정 움직임이 필요하다면 더 느리고 단순한 참조 자료로 시작하세요.

향수 광고의 경우, 완전한 360도 회전보다는 부드러운 수평 카메라 이동이 다루기 쉬운 시작점입니다.

명확한 참조 자료와 상충되는 지시를 줄이면 생성된 결과를 평가하고 개선하기가 더 쉬워집니다.

8. 영상 기반 참조 vs 이미지 투 비디오: 차이점은 무엇인가요?

두 접근 방식 모두 참조 자료를 사용하여 영상을 제작하지만, 워크플로는 다릅니다.

비교	이미지 투 비디오	영상 기반 참조
주요 입력	시작 이미지	지원되는 참조 자료 조합
시각적 시작점	업로드된 이미지를 기반으로 함	참조 자료와 프롬프트 지시에 의해 결정됨
모션 방향	주로 비디오 프롬프트를 통해 설명됨	기존 모션 참조에서도 가져올 수 있음
일반적인 용도	정지 이미지 애니메이션화	추가 모션, 카메라 움직임 또는 참조 자료를 활용한 동영상 제작
준비 단계 집중 포인트	첫 프레임 구성 및 시작 포즈	각 참조 자료의 명확한 역할 정의

단순히 제품 이미지를 애니메이션으로 변환하려는 경우, 표준 Image to Video 워크플로우만으로도 충분할 수 있습니다.

하지만 기존 광고의 카메라 움직임을 제품에 적용하고 싶다면, Reference to Video 기능이 또 다른 창의적인 접근 방식을 제공합니다.

자주 묻는 질문: Reference to Video AI

이미지와 동영상을 모두 업로드해야 하나요?

반드시 그렇지는 않습니다. 입력 요구 사항은 선택한 모델과 지원되는 참조 유형에 따라 다릅니다. 자료를 준비하기 전에 사용 가능한 옵션을 확인하세요.

참고 동영상의 피사체가 참고 이미지와 일치해야 하나요?

항상 그렇지는 않습니다. 카메라 움직임이나 특정 환경 효과만 차용하는 경우, 참고 동영상에 다른 피사체가 등장해도 괜찮습니다. 프롬프트에서 무엇을 참조해야 하는지 명확하게 설명하세요.

참조 이미지를 더 많이 업로드하면 결과가 개선되나요?

자동으로 개선되지는 않습니다. 구성, 외관 또는 모션 방향이 상충하는 참조 자료는 작업을 더 어렵게 만들 수 있습니다. 관련성이 높은 소량의 자료로 시작하여 각각의 역할을 명확히 지정하세요.

내 음악을 참조 자료로 사용할 수 있나요?

일부 멀티모달 비디오 모델은 오디오 참조를 지원합니다. 사용 가능 여부, 지원 형식 및 길이 제한은 선택한 모델에 따라 다릅니다.

'비디오 참조' 기능으로 기존 비디오를 정확히 복제할 수 있나요?

참고 자료는 생성 과정을 안내하지만, 프레임 단위로 완전히 동일한 결과를 보장하지는 않습니다. 특정 동작이나 카메라 효과가 필요하다면 보존해야 할 요소를 명확히 설명하고, 테스트를 통해 결과를 세부 조정하세요.

마무리: 더 나은 참조 자료는 더 명확한 크리에이티브 방향성을 의미합니다

AI 비디오 참조 기능의 가치는 단순히 더 많은 자료를 업로드할 수 있다는 데 있지 않습니다.

이는 비디오 생성 과정에 더 명확한 크리에이티브 방향성을 제시할 수 있는 기회입니다.

다음 세 가지 예시는 서로 다른 참조 자료가 어떻게 협력하는지 보여줍니다:

향수 광고에서는 이미지가 제품을 정의하고, 비디오가 카메라 움직임을 안내합니다.

패션 포트레이트에서는 이미지가 모델과 환경을 설정하고, 비디오가 조명 참조를 제공합니다.

또한 빈티지 극장 오프닝 장면에서는 배경 이미지, 커튼 움직임, 선택적 오디오를 결합하여 더 조화로운 결과를 만들어냅니다.

이 세 가지 워크플로우 뒤에 숨겨진 원칙은 동일합니다:

AI에게 조합을 요청하기 전에 각 참조 자료가 수행해야 할 역할을 먼저 정의하세요.

단일 이미지에 애니메이션 효과만 적용하려면 Movmix AI Image to Video로 시작해 보세요.

크리에이티브 목표에 더 정밀한 지시가 필요할 경우, 처음부터 작업을 불필요하게 복잡하게 만들기보다는 추가 참조 자료를 점진적으로 도입하세요.

더 나은 참조 자료란 더 많은 참조 자료를 의미하는 것이 아닙니다. 더 명확한 크리에이티브 방향성을 의미합니다.