유튜브 화성인 릴도지 AI 사용 [저장용]

 

 

유튜브 화성인 릴도지 너무 좋아한다. 알고리즘으로 처음 봤을때 너무 깜짝놀랐다.

그리고 댓글에 보니까 누가 "미쳤어요? ㅋㅋㅋㅋ " 이걸 봤다. 

어떤 AI를 사용했을까? 한번 조사해 봤다. 나도 할수 있을까? 아... 이건 특별한 신념과 똘끼가 있어야 진정 가능한데.

 

화성인 릴도지

 

 

화성인 릴도지 영상 제작에 사용된 AI 기술 요약

1. 인물 생성 – 캐릭터 얼굴

• 주로 등장하는 인물들(예: 김정은, 김여정)은 LoRA 학습을 통해 일관된 이미지 스타일로 만들어짐.
  • LoRA란? → AI 이미지 모델에 특정 인물의 외형을 학습시켜 꾸준히 비슷한 스타일의 이미지를 생성하게 하는 기술.

---

2. 움직이는 영상 생성

• Runway는 유명인 생성 제약이 있어서 대신 Hailuo.video 사용
  • 이 툴은 텍스트, 이미지 등을 입력하면 짧은 영상(움직이는 씬)을 자동 생성해줌

---

3. 립싱크(입모양 움직임 맞추기)

• Runway나 Kling의 Audio-to-Lip 기능을 사용할 수도 있지만,
  정확한 입모양 제어를 위해 LivePortrait의 Video-to-Video 기능 사용 가능성 높음.
  • 이 방식은 실제 영상 기반으로 입모양을 정밀하게 맞춰줌

---

4. 배경제거

• 영상에서 인물만 남기고 배경 제거
• Video Background Remover 사용 (프리미어 프로 대신 더 자동화된 AI 도구)

---

5. 목소리 생성 / 음성 변조

• 노래나 대사에 대해 RVC 모델 또는 so-vits-svc 활용
  • MR(반주), AR(보컬 포함) 분리 후,
  • 본인 음성 녹음 → AI로 다른 사람 목소리처럼 변조
• 또는 아예 AI 목소리를 직접 사용했을 수도 있음

 

단 하나의 AI가 아닌, 여러 AI 툴을 결합한 고차원 콘텐츠 제작 방식을 사용

 

기능	사용된 AI 도구
인물 생성	LoRA + 이미지 생성 모델
영상 생성	Hailuo.video, Runway
립싱크	LivePortrait
배경제거	Video Background Remover
음성/노래 변조	RVC, so-vits-svc
영상 편집(최종)	프리미어 프로 or AI 편집 도구

---

 

 

 

 

 

---

Sora vs. LoRA — 차이 한눈에 보기

나는 TV에서 하도 Sora가 많이 나와서 똑같은 것인줄 알았는데 두개가 완전 다른 거였다. 

구분	Sora	LoRA
종류	영상 생성 AI	학습 기법 (모델 튜닝 기술)
만든 곳	OpenAI (ChatGPT 만든 회사)	원래 Microsoft 연구에서 유래
역할	텍스트 → 실사급 비디오 생성	기존 AI 모델에 커스텀 데이터를 추가 학습시킴
예시	“곰이 마트에서 장보는 5초 영상 만들어줘” → 실제처럼 보이는 영상 생성	“김정은 스타일 캐릭터를 계속 일관되게 생성하고 싶다” → 기존 모델에 LoRA 학습 추가

 

---

 

• Sora는 “AI가 영상 자체를 만들어주는 기능”.
  • ex) “사람이 바닷가를 걷는 영상 만들어줘” → AI가 통째로 영상 만들어줌
• LoRA는 “기존 AI 모델에 나만의 스타일/캐릭터를 추가 학습시키는 기술”.
  • ex) “김정은처럼 생긴 캐릭터만 계속 만들고 싶어” → 이미지 생성 AI에 김정은 사진 여러 장 학습시키기 (이게 LoRA)

 

---

🎨 어디에 쓰이냐면

• 캐릭터 영상 채널(예: 릴도지)에서는
  • 캐릭터 얼굴 = LoRA로 만든 이미지
  • 움직임 = Hailuo나 Runway
  • 목소리/립싱크 = RVC나 LivePortrait

---

✅ 긴 AI 영상 만들기 – 가능한 이유

클링과 같은 것은 쇼츠처럼 반복된 이미지에 맞는다. 5초까지만 되기 떄문 

1. AI 음성 생성 툴들이 이제 “긴 스크립트”도 처리 가능
   • 예전엔 515초 제한이 있었지만, 지금은 **5분30분짜리 음성도 가능**
   • 예:
     • ElevenLabs (영어): 10분 이상 OK
     • Typecast (한글): 유료 플랜이면 10분 이상 음성 가능
     • Descript / PlayHT: 긴 팟캐스트 스타일 음성 생성도 지원
2. AI 영상 툴이 “스크립트 기반 자동 영상 분할” 지원
   • 스크립트를 자동으로 씬별로 나눠서 배경 이미지, 영상, 자막을 자동 배치
   • 예:
     • Pictory.ai: 긴 글도 장면별로 영상 자동 생성
     • Synthesia / HeyGen: AI 아바타 영상도 5~10분 제작 가능
     • Runway / Hailuo.video: 여러 클립을 연결하면 긴 영상 만들기 가능

---

 

🎬 그래서 가능해진 구조는?

예를 들어, 5분짜리 영상 하나 만들고 싶다면:

1. 스크립트 작성 (예: 블로그에서 복사하거나 AI로 생성)
2. AI 음성으로 변환
   • Typecast 또는 ElevenLabs로 전체 대사 생성
3. AI 영상 툴로 씬 나누고 자동 편집
   • Pictory, Hailuo 등에서 배경 이미지/비디오 자동 넣기
4. 최종 편집 (자막, 음악, 타이밍 조절)
   • CapCut, Premiere Pro 등으로 마무리

➡️ 이 과정을 잘 조합하면 릴도지처럼 자연스럽고 긴 AI 영상 충분히 만들 수 있다. 

---

 

LoRA	요소가능
긴 음성 생성	✅ 가능	Typecast, ElevenLabs 등
긴 영상 생성	✅ 가능	씬 분할 기반 자동 생성
반복 없이 자연스러운 흐름	✅ 가능	스크립트 구조 + 적절한 씬 배치 필요
얼굴/입 움직임	✅ 가능	LivePortrait, D-ID 등 활용

 

예전부터 직장인 기반으로 병맛스토리를 만들고 싶었는데, Chat gpt로 한번 짜봤다. 

🎬 영상 컨셉:

제목 예시

“회사 가기 싫은 5인의 직장인 – 오늘도 출근했다...”

---

 

🧠 영상 구성 플랜 (약 45초 ~ 1분짜리 AI 영상)

1. 스크립트 예시 (내레이션)

(음성 톤: 지친 듯 건조하게 읽는 AI 목소리)

“여기는 대한민국 어딘가의 사무실.
5명의 직장인이 오늘도 자리에 앉아있습니다.
하지만 모두… 일하기 싫어 죽을 것 같은 표정이죠.
에어컨은 고장났고, 회의는 또 시작되죠.
자기 자리를 빼앗기지 않기 위해 화장실도 참고 있는 그들.
이것이 바로… 현실 직장입니다.”

(마지막에 낮고 진지한 음악과 함께)

“당신의 오늘도 안녕하신가요?”

---

2. AI 음성

• Typecast 한국어 남성 목소리 중 "지친 회사원" 톤
• 또는 ElevenLabs (영어 가능): ‘tired office worker’ 스타일

---

3. AI 영상 생성

• 툴: Pictory.ai 또는 Kaiber.ai 또는 Runway
• 영상 이미지 키워드 입력 예:
  • “five Korean office workers sitting at desks, tired and stiff faces, soulless, cold color tone, exaggerated facial expressions, absurdity”
• 병맛 느낌 강조하려면 이미지 스타일을:
  • “low-budget animation”
  • “webtoon style”
  • “flat cartoon, exaggerated expressions”

---

4. 자막 + 효과

• 자막: AI 음성 싱크 맞춰서 자동 생성 (CapCut 자동 자막)
• 효과:
  • 책상 흔들림
  • 얼굴 ‘움찔’ 효과
  • 뒤에서 상사 지나감 (병맛스럽게 어색한 움직임)

---

 

5. 음악/효과음

• 배경음: “지친 일상” 스타일 (피아노 + 시계 초침소리)
• 효과음:
  • 한숨
  • 키보드 두드리는 소리
  • “띵동” (회의 알림음)

---

📦 사용할 AI 도구 요약

기능툴	추천
음성 생성	Typecast (한글), ElevenLabs (영어)
장면/이미지 생성	Runway / Kaiber / Hailuo
입 모양/영상 생성	LivePortrait (필요 시)
자막/편집	CapCut, Pictory.ai

 

 

참고로, 여기서 Lora는 웹사이트가 아니고, 생성 기술임. 

여기서 말하는 LoRA (Low-Rank Adaptation) 는 **"AI 모델을 훈련시키는 기술 자체"**이고,
LoRA를 직접 사용할 수 있는 웹사이트는 따로 있는 게 아니라,
LoRA 기능을 지원하는 플랫폼이나 툴을 통해 사용할 수 있다. 

---

 

✅ LoRA를 사용할 수 있는 대표적인 플랫폼

1. Civitai (https://civitai.com/)

• LoRA 모델을 공유하거나 다운로드 받을 수 있는 대표 사이트
• 예: "김정은 LoRA", "애니 캐릭터 LoRA" 등 다양하게 검색 가능
• 사용처: Stable Diffusion 이미지 생성에 연결해서 사용

📌 주소: https://civitai.com

---

2. Hugging Face (https://huggingface.co/)

• LoRA로 튜닝된 모델들이 공개되어 있음
• 주로 개발자들이 직접 업로드하는 기술용 버전
• 검색어에 “LoRA”를 넣으면 수백 개의 튜닝 모델 확인 가능

📌 주소: https://huggingface.co

 

• LoRA는 일반적인 “입력하면 바로 그림 나오는” 그런 툴이 아니라,
• Stable Diffusion, ComfyUI, InvokeAI 같은 생성 툴에 연결해서 사용
• 초보자에게는 바로 쓰기 어렵지만, Civitai에선 간단하게 미리보기도 가능

 

AI CHAT GPT 이용 웹사이트 추천 - 검색과 영어 공부

 

컴퓨터 단축키 총정리 [ 저장용] [계속 업데이트 예정]

 

블로그 AI - 블로그 써주는 AI

 

유튜브 콘텐츠 쓰기, 내용 쓰기 (추가 : AI 이용하려면)

 

클링 Kling AI 리뷰 사용법 - 비디오 생성 AI

 

Chat GPT 디지털 휴먼- AI Soul machine 소울 머신 사용