AI 영상 만들기
퇴사할게여 AI 댄스 영상 · 실제 프롬프트 전부
🎮
영상에서는 결과만 보여 드렸습니다. 따라 하려면 실제로 넣은 프롬프트와 설정이 필요해서 전부 적었습니다.
2026년 10월 8일 오후부터 9일 새벽까지 만든 작업 기록에서 그대로 옮겼습니다. 기록에 없는 것은 "원문 기록 없음"으로 적었습니다.
상사와 동료는 AI로 만든 가상 인물입니다. 실제 사람이 아닙니다.
한눈에 보기
| 항목 | 실제 값 |
|---|---|
| 결과물 | 2편, 세로 9:16 1080×1920 — 이야기 버전 35.1초(사무실 → 무대 → 사무실 → 로고) / 무대 버전 35.4초(무대 29초 → 로고) |
| 등장인물 | 3명 — 가운데 대표(셀카 1장 기준), 왼쪽 상사(후줄근한 개발자), 오른쪽 동료. 상사·동료는 AI 가상 인물 |
| 춤 기준 영상 | 소연 「퇴사할게여」 무대 영상 28.6초(가운데 가수 1명 + 양옆 댄서 2명). 춤 동작 기준으로만 썼고, 우리 곡이 아닙니다 |
| 그림 도구 | ChatGPT(세 사람 단체 그림) / 힉스필드 GPT Image 2.5(사무실 그림, 얼굴·머리 수정) |
| 영상 도구 | 힉스필드 Genjutsu(무대 전체, 480p) / Kling 3.0 모션 컨트롤(한 명씩 단독 컷, 720p) / Seedance 2.0(입 맞춤 2컷, 480p 4초) / Kling 3.0 Turbo(사무실, 720p 5초) |
| 목소리 | 대사는 전부 대표가 직접 녹음. 동료 대사도 대표 목소리를 녹음해 음을 올린 것 |
| 얼굴 | 맥에서 무료 얼굴 바꾸기(insightface + inswapper_128). 대표 얼굴에만 적용, 상사·동료 얼굴은 그대로 |
| 편집 | 맥에서 ffmpeg(파이썬 스크립트로 자르기·붙이기·소리 맞추기) |
| 비용 | 영상·그림 생성은 힉스필드 크레딧(유료). ChatGPT 그림·녹음·얼굴 바꾸기·편집은 크레딧 0. 단계별 도구 견적은 아래 각 프롬프트에 적었습니다 |
| 걸린 시간 | Genjutsu 무대 29초 생성 약 10분 / 얼굴 바꾸기는 맥북 에어 CPU로 약 1,000프레임에 약 2시간 |
1. 왜 Genjutsu로 갔나
- 시작은 인스타그램에서 유행한 방법 영상이었습니다. 무대 영상 전체를 그대로 두고, 등장인물의 전신 사진을 여러 장 함께 넣어 사람만 바꾸는 방식입니다.
- 처음에는 다르게 했습니다. 세 사람이 함께 선 그림 1장과 무대 3.6초 조각만 넣었습니다. 모션 컨트롤에 세 명을 한 번에 넣으면 생성이 실패했고, Genjutsu에 단체 그림 1장을 넣으면 중간에 가운데 대표 얼굴이 원래 여자 가수 얼굴로 바뀌었습니다.
- 그래서 방법을 바꿨습니다. 사람마다 기준 그림을 따로 1장씩, 무대 영상은 통째로 넣었습니다. 그러자 29초 내내 가운데가 대표로 유지됐습니다.
2. 쓴 도구와 순서
| 단계 | 도구 | 만든 것 |
|---|---|---|
| 1 | ChatGPT | 무대 한 장면 + 세 사람 사진 → 세 사람이 무대에 선 단체 그림. 이 그림을 맥에서 사람별로 잘라 세로 기준 그림 3장을 만듦 |
| 2 | 힉스필드 Genjutsu | 무대 영상 전체 + 기준 그림 3장 → 29초 무대. 포니테일이 나온 구간은 다시 생성 |
| 3 | Kling 3.0 모션 컨트롤 | 한 명씩 단독 컷(대표, 긴 머리 상사). 원본 무대에서 그 사람 자리만 잘라 동작 영상으로 넣음 |
| 4 | Seedance 2.0 | 대표가 말하는 2컷 입 맞춤 — "…퇴사할게여" / "…퇴사는 못 했습니다" (이야기 버전) |
| 5 | Kling 3.0 Turbo (이미지→영상) | 사무실 5초 — 상사가 서류를 던지고, 대표가 넥타이를 고쳐 맴 (이야기 버전) |
| 6 | 대표 녹음 | 대사 6줄 전부. 동료 대사는 음을 올림 |
| 7 | insightface + inswapper_128 (맥, 무료) | 대표가 나오는 영상 6개에 실제 얼굴을 덮음 |
| 8 | ffmpeg (맥, 무료) | 세로 화면 배치, 컷 잇기, 대사·노래 소리 맞추기, 로고 화면 |
3. 프롬프트 원문
① ChatGPT 단체 그림
첨부 순서: 1번 무대 한 장면(원본 19.5초 화면) / 2번 대표 셀카 / 3번 상사 사진 / 4번 동료 사진. 상사·동료 사진은 AI 가상 인물입니다. 첨부 순서가 중요합니다. 글이 "image 1, image 2…" 순서로 쓰여 있습니다.
Create an image, landscape 16:9 (1536x864). Use image 1 (a stage performance frame) as the exact layout: same stage, same camera angle, same three people positions and the same dance poses. Replace the three performers: CENTER singer holding the mic = the man in image 2 (keep his face exactly, white dress shirt with a black tie). LEFT dancer = the man in image 3 (keep his face and glasses exactly; sloppy developer look, wrinkled dark t-shirt, loose pants). RIGHT dancer = the woman in image 4 (keep her face exactly; stylish office look, fitted white blouse and short black skirt, tasteful, not explicit). Photorealistic, natural body proportions, full bodies visible like image 1. Remove all broadcast logos, captions and on-screen text. Keep the audience silhouettes at the bottom.
나온 그림을 맥에서 가운데·왼쪽·오른쪽으로 잘라 세로 720×1280 기준 그림 3장을 만들었습니다. 상사는 원본 댄서 크기에 맞추려고 80%로 줄여 한 번 더 잘랐습니다.
② Genjutsu — 무대 영상 전체 (최종 사용)
설정: 힉스필드 Genjutsu(hf_mult_motion_control) / 480p / 기준 그림 3장(1번 대표, 2번 상사, 3번 동료) + 무대 영상 28.6초. 도구 견적: 480p 87크레딧, 720p 203크레딧.
In the uploaded stage video, replace the CENTER woman (lead singer holding the microphone) with the young man in the first photo: keep his face exactly, white dress shirt and black tie, black trousers. Replace the LEFT backup dancer with the heavyset man with black glasses in the second photo: keep his face exactly, black t-shirt and grey cargo pants. Replace the RIGHT backup dancer with the woman in the third photo: keep her face exactly, white blouse and black mini skirt. Keep the original choreography, camera cuts, stage, lighting and audience exactly. In close-up shots the lead singer must remain the young man from the first photo.
③ Genjutsu — 포니테일 구간 다시 생성
같은 기준 그림 3장에, 원본 무대에서 문제 구간만 잘라 넣었습니다. 도구 견적: 0–2.7초 구간 12크레딧 / 18.7–24.7초 구간 18크레딧(둘 다 480p).
In the uploaded stage video, replace the CENTER woman (lead singer holding the microphone) with the young man in the first photo: keep his face exactly and his SHORT black hair exactly as in the photo — short men's haircut with bangs, NO ponytail, NO long hair, NO hair tie, nothing hanging behind his head even when he turns or bends. White dress shirt with black tie, black trousers. Replace the LEFT backup dancer with the heavyset man with glasses in the second photo (black t-shirt, grey cargo pants). Replace the RIGHT backup dancer with the woman in the third photo (white blouse, black mini skirt). Keep the original choreography, camera cuts, stage, lighting and audience exactly.
결과: 0–2.7초는 짧은 머리로 나와 앞 0.67초를 썼습니다. 18.7–24.7초는 다시 뽑아도 긴 머리가 나와서 버렸습니다(아래 5장).
(참고) 처음 실패한 Genjutsu — 단체 그림 1장 + 3.6초 조각
도구 견적: 720p 28크레딧. 중간에 가운데 얼굴이 원래 가수 얼굴로 바뀌어 쓰지 않았습니다.
The three people from the reference image (left: heavyset man with glasses in black t-shirt; center: young man in white shirt and black tie holding a microphone; right: woman in white blouse and black mini skirt) perform the exact choreography of the three dancers in the reference video on the same stage, same positions, same camera movement. Keep their faces and outfits exactly.
④ Kling 3.0 모션 컨트롤 — 한 명씩 단독 컷
프롬프트는 넣지 않았습니다. 넣은 것은 그림 1장과 동작 영상 1개뿐입니다.
- 설정: 힉스필드 모션 컨트롤(kling3_0_motion_control) / 720p / scene_control: image(배경은 그림 쪽을 따름)
- 그림: 단체 그림에서 그 사람만 잘라낸 세로 그림
- 동작 영상: 원본 무대 19.45초부터 3.65초를 720p로 키운 뒤, 같은 사람 자리만 세로로 잘라낸 영상
- 도구 견적: 원문 기록 없음
⑤ 긴 머리 상사 그림 (GPT Image 2.5)
힉스필드 GPT Image 2.5, 9:16. 참고 그림은 상사 기준 그림. 이 그림을 ④ 방식으로 단독 춤 컷으로 만들었습니다. GPT Image 2.5 그림 1장 도구 견적은 0.25크레딧(9:16)이었습니다.
Edit this image: keep the heavyset man's face, black glasses, black t-shirt, grey cargo pants, pose, stage background and framing exactly the same. Only change his hair: long straight black hair falling past his shoulders like a female idol dancer's hair, slightly messy, parted in the middle. Photorealistic, natural. No text.
⑥ 사무실 그림 (GPT Image 2.5) — 이야기 버전
참고 그림: ①의 단체 그림.
Photorealistic vertical shot inside an ordinary Korean office at late afternoon, fluorescent lights, cubicles, monitors, piles of paper. Use the two men from the reference image with their exact faces: the heavyset man with black glasses in a wrinkled black t-shirt (the boss, sloppy developer look) stands beside a desk and is tossing a stack of papers onto it with an annoyed face. The young man in a white dress shirt and black tie (the employee) sits at the desk, exhausted, staring blankly. Medium shot, both fully in frame, natural lighting, cinematic, no text, no logos.
대표 얼굴이 덜 닮아서 얼굴만 고쳤습니다. 1번 그림 = 위 사무실 그림, 2번 그림 = 대표 얼굴을 가까이 자른 사진(이 페이지에는 싣지 않음).
Edit image 1: keep the entire scene, composition, lighting, clothing, the heavyset boss and the papers exactly the same. Only replace the face and hair of the young man sitting at the desk (white shirt, black tie) with the exact face and hairstyle of the man in image 2 — same eye shape, nose, jawline, slightly fuller cheeks, thick wavy black hair with bangs. Photorealistic, natural skin, tired expression. No text.
⑦ 사무실 영상 Kling 3.0 Turbo — 이야기 버전
설정: 5초 / 720p / 9:16 / 첫 화면 = ⑥에서 얼굴을 고친 그림. 도구 견적: 7.5크레딧.
The heavyset boss in the black t-shirt drops the stack of papers onto the desk with a thud and points at it, annoyed, then turns away. The young man in the white shirt and tie stares at the papers, then slowly lifts his head; his tired eyes turn sharp and determined, he tightens his tie with one hand. Keep the young man's face exactly as in the image. Realistic office, subtle handheld camera slowly pushing in on the young man's face. No text.
(얼굴을 고치기 전 첫 판은 "Keep the young man's face exactly as in the image." 문장만 빠진 같은 글이었습니다.)
⑧ Seedance 2.0 입 맞춤 2컷 — 이야기 버전
설정: 4초 / 480p / 9:16 / 첫 화면 = 사무실 영상 끝의 대표 클로즈업 / 소리 참고 = 대표가 녹음한 대사 파일. 도구 견적: 1컷 12크레딧.
"…퇴사할게여"
The young man in the white shirt and black tie in the start image finishes tightening his tie, looks straight into the camera with a determined face and says the Korean line from the audio reference, lips precisely synced to that audio. Short pause before speaking, then a calm but firm delivery. Static locked-off camera, keep the exact same framing, office background and lighting as the start image. No text, no music.
"…퇴사는 못 했습니다"
Back at the office desk after the party: the young man in the white shirt and loosened black tie sits at the desk, slightly out of breath and sheepish, papers scattered on the desk. He looks into the camera and says the Korean line from the audio reference quietly, lips precisely synced to that audio, then gives a small awkward smile. Static locked-off camera, same framing, office background and lighting as the start image. No text, no music.
⑨ 대표 녹음 — 대사 6줄
- 상사: "이거 오늘까지 다시 해 와." (대표가 연기)
- 대표: "…퇴사할게여."
- 동료: "팀장님이 왜 제일 신나요?" (대표가 녹음 → 편집에서 음을 올림, 화면 밖 목소리로 넣음)
- 대표: "…퇴사는 못 했습니다."
- 끝 화면: "퇴사하고 싶은 날도, 같이 춤춰 주는 팀이면 남습니다." / "아이스크림소프트."
⑩ 얼굴 바꾸기 (맥, 무료) — 핵심 설정
대표가 나오는 영상 6개(대사 2컷, 사무실, 단독 무대, 무대 첫 장면, 무대 전체)를 프레임마다 처리했습니다. 장면 속 얼굴이 AI 대표·상사·동료 중 누구와 가장 비슷한지 먼저 가리고, 대표로 판정된 얼굴만 실제 셀카 얼굴로 바꿨습니다.
app = FaceAnalysis(name='buffalo_l', allowed_modules=['detection', 'recognition'], providers=['CPUExecutionProvider'])
app.prepare(ctx_id=0, det_size=(640, 640))
sw = insightface.model_zoo.get_model('inswapper_128.onnx', providers=['CPUExecutionProvider'])
# 누구 얼굴인지 가리는 기준: AI 대표 / 상사 / 동료 그림에서 뽑은 얼굴 특징
for f in app.get(frame):
k, s = who(f) # 가장 비슷한 사람과 점수
if k == 'ceo' and s['ceo'] > 0.12: # 대표일 때만
frame = sw.get(frame, f, src, paste_back=True)
4. 세로 화면 편집 (ffmpeg)
- 무대는 가로 화면이라 세로를 꽉 채우면 양옆 두 사람이 잘립니다. 그래서 셋이 나오는 넓은 장면은 가운데 가로 띠로 두고, 위아래는 같은 화면을 흐리게·어둡게 깔았습니다.
- 단독 컷(대표, 긴 머리 상사)은 세로 화면 가득 채웠습니다.
- 이야기 버전은 대사가 나올 때 노래 소리를 자동으로 낮췄고(sidechain), 두 편 모두 소리 크기를 -14 LUFS로 맞췄습니다.
- 끝 화면은 로고 7초 + 대표 목소리입니다.
5. 막혔던 것과 고친 방법
| 문제 | 고친 방법 |
|---|---|
| 모션 컨트롤에 세 사람 단체 그림을 넣으면 생성 실패(실패분 크레딧은 돌려받음) | 한 명씩 넣으면 성공. 세 명이 함께 나오는 무대는 Genjutsu에 사람별 기준 그림을 따로 넣는 방식으로 바꿈 |
| Genjutsu에 단체 그림 1장 + 3.6초 조각을 넣었더니 가운데 얼굴이 원래 가수 얼굴로 바뀜 | 사람별 그림 3장 + 무대 영상 전체로 다시 생성 → 29초 내내 가운데가 대표로 유지 |
| 원래 가수의 포니테일 움직임을 따라가서 대표 뒤로 긴 머리가 보임(0–0.7초, 18.7–24.7초) | 그 구간만 "SHORT black hair, NO ponytail"로 다시 생성. 앞 구간은 성공, 뒤 구간은 또 긴 머리라 같은 순간의 대표 단독 컷(짧은 머리)으로 바꿔 끼움 |
| 무대 속 상사는 원본 댄서를 따라 긴 머리인데, 단독 컷 상사는 짧은 머리라 컷이 바뀔 때 어긋남 | 상사 그림을 긴 머리로 고쳐(⑤) 단독 컷을 다시 만듦. 긴 머리 상사가 신나게 추는 장면이 웃음 포인트가 됨 |
| AI가 대표 얼굴을 실물보다 갸름하고 눈이 큰 아이돌 얼굴로 그림. 첫 단체 그림부터 바뀌어 모든 영상에 이어짐 | 맥에서 무료 얼굴 바꾸기(⑩)로 대표 얼굴만 실제 셀카 얼굴로 덮음. 상사·동료 얼굴은 손대지 않음 |
| Seedance가 입 맞춤 영상에 붙여 낸 소리에서 대사 일부가 바뀌어 있었음 | Seedance 소리는 끄고, 대표가 녹음한 원래 목소리를 그 위에 얹음 |
6. 따라 할 때 막히는 곳 (실제로 막혔던 것)
- 여러 명을 한 장에 넣으면 무너진다. 모션 컨트롤은 단체 그림으로 실패했고, Genjutsu도 단체 그림 1장으로는 가운데 얼굴이 원래 가수로 돌아갔습니다. 사람마다 기준 그림을 따로 넣으세요.
- 원본 동작에 머리카락 움직임도 들어 있다. 원래 가수가 포니테일을 흔드는 구간에서는 프롬프트로 "NO ponytail"을 강하게 적어도 긴 머리가 다시 나왔습니다. 그 구간은 단독 컷으로 바꾸는 편이 빨랐습니다.
- 컷이 바뀔 때 머리 길이가 어긋난다. 같은 사람이 무대 영상과 단독 컷에서 머리 길이가 다르면 바로 티가 납니다. 단독 컷 그림을 무대 영상 쪽에 맞추세요.
- AI 얼굴은 실물보다 잘생기게 바뀐다. 그림 단계에서 얼굴이 바뀌면 그 뒤 영상이 전부 따라갑니다. 마지막에 얼굴 바꾸기로 덮는 게 확실했습니다.
- 입 맞춤 영상의 소리는 그대로 쓰지 않는다. 녹음 파일을 넣어도 생성된 소리는 대사가 달라질 수 있습니다. 녹음 원본을 다시 얹으세요.
- 얼굴 바꾸기는 느리다. 맥북 에어 CPU로 약 1,000프레임에 약 2시간 걸렸습니다. 얼굴을 바꾸는 모델 파일(inswapper_128)은 공식 배포처가 없어 개인이 올린 사본을 받게 되니, 받기 전에 출처를 확인하세요. 본인 얼굴이나 동의받은 얼굴에만 쓰세요.
- 세로 화면에 가로 무대를 넣을 때. 꽉 채우면 양옆 사람이 잘립니다. 넓은 장면은 가운데 띠, 단독 장면은 가득 채우기로 섞었습니다.
7. 저장용 요약 — 무대 춤 영상에 우리 사람 넣는 순서
- 단체 그림 1장 — 무대 한 장면 + 사람 사진을 넣고 자리마다 한 사람씩 배정(ChatGPT).
- 사람별 기준 그림 — 단체 그림을 사람마다 세로로 잘라 3장.
- Genjutsu — 무대 영상 전체 + 기준 그림 3장. 가운데·왼쪽·오른쪽을 사진 순서로 지정.
- 문제 구간만 — 머리·얼굴이 틀어진 구간만 잘라 다시 생성하거나, 단독 컷(모션 컨트롤)으로 바꿔 끼우기.
- 대사는 녹음 원본 — 입 맞춤(Seedance) 영상 위에 녹음 목소리를 얹기.
- 얼굴은 마지막에 — 맥에서 무료 얼굴 바꾸기로 주인공 얼굴만 덮기.
- 편집 — 넓은 장면은 가운데 띠, 단독 장면은 가득.
🍦
아이스크림소프트 · 게임을 만드는 팀이, 당신의 서비스를 만듭니다
인스타그램 @ceo_icecreamsoft — 게임회사 대표가 AI로 만드는 과정을 실패까지 올립니다
※ 공개용으로 고친 곳: 동료 인물 프롬프트의 옷차림 표현 한 군데를 "stylish office look"으로 다듬었습니다. 나머지 프롬프트는 작업 기록 원문 그대로입니다.