Search
🐳

AI를 활용한 영상 제작 1 (김선우 튜터 10/24)

녹화자료
[강의 목표]
AI 영상이 가져온 제작 효율·콘텐츠 전략·창작 패러다임의 변화를 이해하고 어떤 특징이 있는지 사례를 통해 분석할 수 있다.
AI 영상 생성의 원리를 이해하고, 시나리오에 맞는 프롬프트를 논리적·시각적으로 설계하여 원하는 장면을 구현할 수 있다.
다양한 AI 영상 툴을 알고, 미드저니와 Sora2를 용도에 맞게 활용할 수 있다.
[목차]
인트로
AI 영상 트렌드
AI 영상 제작 특징
AI 영상 생성 방식
AI 영상 프롬프트 작성법
AI 영상제작 Tool

인트로

AI 영상을 찾아라!

연습 게임 (이것은 AI인가 진짜인가)

정답 : 손가락으로 1번 or 2번
문제는 총 7개!
정답 다 맞히는 사람 100포인트

문제 갑니다

AI 영상 트렌드

최근 AI를 활용한 영상 콘텐츠 제작 ↑
AI 영상은 나날이 발전 중
AI 영상 툴 발전은 마케터의 생태계를 어떻게 바꿔 놓을 것 같나요?
야나두 AI 시리즈
삼성증권 (mPOP)
유플러스
APEC 2025 KOREA 경주 홍보 영상 패러디
Nike
2조의 아티클 스터디

AI 영상 제작 특징

과거와 현재의 영상 제작의 차이점은 뭐가 있을까?
텍스트 프롬프트 한 줄로 아이디어 구현 가능
복잡한 촬영 계획 없이 장면 초안이 바로 생성
예: “공원 배경, 따뜻한 분위기, 30대 남성이 운동복을 입고 앉아있다가 일어선다
콘텐츠 제작부터 배포하는 흐름이 빠르고 유용함
전문 장비, 로케이션, 출연자가 없이도 제작 가능
후반 작업 툴과 결합해 SNS나 브랜드 영상까지 확장 가능
포인트: AI는 ‘상상 → 시각화’ 과정을 자동으로 해주는 역할

나의 예민한 친구, AI…

AI 영상 생성 방식

AI 영상 생성의 두 가지 큰 방식

A. 텍스트 → 영상 (Text-to-Video / T2V)

사용자가 문장(프롬프트)을 입력하면 AI가 그 문장을 기반으로 장면 생성
T2V 프롬프트 예시
장점 :
빠른 결과물 생성
머릿속에 있는 아이디어 즉시 시각화 가능
영상 초안이나 콘셉트 시각화 단계에서 특히 강력
단점 :
원하는 디테일을 완벽히 제어하기는 어려움
인물의 움직임이나 복잡한 액션 장면에서는 퀄리티가 떨어질 가능성 ↑
생각한 그대로”가 아니라 “AI가 해석한 버전” 생성
식당에서 김밥을 먹고 있는 30대 남성 미국인” 이라고 입력하면 장면은 잘 나오지만, 식당 인테리어, 옷 스타일, 조명 톤은 AI 임의 해석

B. 이미지 → 영상 (Image-to-Video / I2V)

특정 이미지(레퍼런스)를 넣고, 그 스타일로 장면을 뽑아내거나 이미지를 애니메이션화합니다.
I2V 예시
장점:
내가 원하는 톤앤매너나 디자인 스타일 더 정확히 반영
특히 캐릭터, 로고, 브랜딩 영상을 제작할 때 효과적
단점:
반드시 적절한 레퍼런스 이미지가 필요
이미지와 다른 방향으로 바꾸기는 어려움
만화풍 일러스트를 하나 넣고 “이 캐릭터가 걸어가는 장면”을 만들면, 같은 느낌의 애니메이션

TIP. I2V & T2V 둘 다 섞어 쓰기!

텍스트로 장면의 ‘행동과 맥락’을 지정 → 이미지로 ‘스타일과 분위기’를 잡아주기 → 훨씬 원하는 결과에 가깝게 영상 생성 가능

AI 영상 프롬프트 작성법

프롬프트 작성 능력

핵심 : AI가 이해할 수 있는 구체적 형태로 지시를 내리는 것
좋은 프롬프트는 AI가 장면, 동작, 스타일을 정확히 이해하도록 도와줌
프롬프트 예
“아침 햇살이 들어오는 학교, 강의실 위 노트북, 후드티 입은 20대 초반 남성, 자연광 느낌, 부드러운 색감”
→ 주제, 행동, 배경, 의상, 조명, 색감까지 모두 포함
구체적 지시 필요
모호하게 쓰면 AI가 임의로 해석 → 예상치 못한 결과 발생

반복과 피드백의 반복

AI로 원하는 결과가 “한 번에” 나온 적이 있었나요?
AI로 한 번에 완벽한 결과물 내는 것은 (거의) 불가능
반복과 피드백 과정을 거칠 수 밖에 없음
시도 → 수정 → 재시도 …
예 : AI가 생성한 장면에서 ‘사람의 웃는 모습이 너무 과하다’ → 프롬프트 수정: “미소만 짓는 모습으로 변경”
grinning → smiling
스타일 조정: 색감, 무드, 조명, 카메라 앵글 등을 조금씩 조정하며 최적화
팁 : ‘완벽한 첫 시도’를 기대할 수 없으니, 반복 과정 자체를 자연스럽게 받아들이자 ..

프롬프트 구성 요소

→ 필요에 따라 다 넣을 수도, 일부만 넣을 수도 있음
주제(Subject): 장면에서 무엇이 중요한지
→ 영상의 중심은 무엇인가?
예: 풀밭에 있는 갈색의 리트리버 강아지
행동(Action): 등장인물이나 객체의 동작
→ 어떤 동작을 하고 있는가?
예: 춤을 추면서 짖고 있다
카메라(Camera): 앵글, 이동, 줌 등 시점
→ 카메라 앵글과 움직임은 어떤가?
예: 미디엄 샷, 카메라 줌인, 팬 이동
조명(Lighting): 시간대, 분위기, 그림자
→ 어떤 빛으로 연출할 것인가?
예: 자연광, 필라이트, 하이키 조명
무드(Mood)&스타일(Style) : 감정, 느낌, 분위기/실사, 애니메이션
→ 분위기, 연출, 톤은 어떤가?
예: 시네마틱, 코믹, 미니멀
색감(Color Palette): 톤, 색상 배치
→ 어떤 색감을 활용할 것인가?
예: 파스텔, 대비 높은 색감, 흑백
세부 사항(Details): 소품, 배경, 의상, 특수 효과
→ 어떤 색감을 활용할 것인가?
예: 공원에는 벤치가 놓여있다, 뭉게구름이 떠있다
포맷 / 비율 (Aspect Ratio) → 설정에 있는 경우 안써도 됨
→ 어떤 플랫폼에 맞출 것인가?
예: 9:16 (숏폼), 16:9 (유튜브), 1:1 (SNS)
[주제] {주제/소재}
[장면] {행동/액션}, 카메라: {카메라 각도와 움직임}, 조명: {빛의 종류·세기·방향}, 분위기: {장면의 전체적인 분위기}, 색감: {컬러 팔레트/톤}, 스타일: {시각적 스타일·아트풍}, 길이: {초 단위}, 화면비: {9:16 / 16:9}, 반복: {예/아니오}, 세부 요소: {소품, 의상, 배경 등 구체적 설명}
Tip: 핵심 요소는 반드시 포함하는 것이 중요
프롬프트 작성 시 “카메라 → 조명 → 분위기 → 스타일 → 세부 요소” 순서로 나열하면 AI가 장면을 이해하기 쉬움 (앞에 있는 것을 중요한 것으로 이해)

프롬프트 구성 요소 용어정리

AI 영상 제작 툴 알아보기

어떤 영상 툴을 써봤나요?
종류
특징
대표 용도
한계점/주의점
Midjourney
· 이미지 생성으로 유명 → I2V 기능 우수 · 이미지 업로드→애니메이션 가능 · 사용자 친화적 인터페이스 · 영상 첫 프레임 이미지 설정 가능
· 이미지 기반 컷 제작 → 영상화 (크리에이티브 컨셉 보드)
· 영상 길이, 프레임 제약 T2V 기능은 약간 제한적 · 영상 extend 4번까지 가능 (연장 가능 길이 짧음)
VEO3 (Google)
· 텍스트 또는 이미지 입력으로 영상 생성 가능 · 오디오(음성/배경음)까지 통합된 기능 보유, 립싱크 지원 · 물리적 시뮬레이션(빛, 물, 천 등) 인식
· 고품질 영상 제작, 마케팅·브랜딩 영상, 실사 모션 필요할 때 · 전문적 영화 제작자, 에이전시 위한 도구로 포지셔닝
· 이용 가능성, 접근성 제약 · 아직 길이가 짧거나 캐릭터 일관성 등에 이슈 있음
Sora2 (Open AI)
·T2V, I2V 영상 생성 지원 · 다양한 스타일(시네마틱, 애니메이션, 리얼) 가능 · 오디오(음성/배경음) 자동 생성 · 물리적 세계 이해 뛰어남, 스토리텔링, 카메라 움직임 이해도 높음 · 맥락 이해기획 이해도 높음 · 한글 프롬프트도 구현 우수
· 내러티브 중심 짧은 영상, 스토리보드, 실험적 콘텐츠, 빠른 프로토타이핑
· 하루 30개 생성 가능 · 10초/15초 영상 길이 · 9:16, 16:9 프레임 · 현재 초대 코드로 제한 인원 제공
Runway
· 텍스트 + 참조 이미지(캐릭터·스타일) 기반 영상 생성 및 스타일 유지 기능이 뛰어남 · 캐릭터 일관성 유지, 다양한 환경 적용 가능 · 크리에이터 친화적 툴 · 영상 편집 및 후처리 기능 제공
· 스토리보드, 영상 실험, 제품/브랜딩 영상, 스타일 중심 영상
· 지속시간 짧음(예: 5–10초) · 동적 모션이나 복잡한 상호작용 장면에서 오류 가능성
사용 목적에 따라 적합한 툴이 달라진다!
최고의 시네마틱 품질과 일관성이 필요하다면 : Sora 2 또는 Veo 3
빠른 속도와 다양한 편집 기능을 활용해 소셜 클립을 제작한다면 : Runway
고화질 이미지 컨셉이 우선이라면 : Midjourney

AI 영상 툴 별 영상 구현 정도

Runway

Gen-4 영상

VEO3

VEO3 영상

Sora2

Sora 2 영상

Midjourney

Midjourney 영상

비교해보기

Sora2 vs VEO3
Midjourney vs SORA

Midjourney (미드저니) 영상 만들기

프로세스
텍스트로 이미지 구현
이미지 기반으로 영상 구현
원하는 이미지로 원하는 영상을 만드는 TIP
이미지 프롬프트를 GPT에게 요청
미드저니 이미지 생성
영상 구현 시 ‘행동(Action)’ 에 대한 프롬프트 추가
(혹은 별도 프롬프트 없어도 이미지 기반으로 영상생성 가능)
영상에 영상을 이어 만들 수 있어요 (최대 4번까지)
그러나 내 맘 같지 않은 미드저니
미드저니로 만드는 I2V 예시

Sora2 영상 만들기

Sora2 영상 만드는 3가지 방법
텍스트 영상 구현
이미지 레퍼런스 영상 구현
피드에 있는 다른 사용자 영상 프롬프트 복사 후 재구성
리믹스(remix) 가능
카메오(Cameo) 기능
Sora2 의 놀라운 기능들!
물리적 현실감
‘알아서’ 맥락을 이해하고 영상을 기획
음향, 대사, 효과음 통합
TIP (워터마크 지우는 법)