The Lone Crab: JSON 스키마와 AI 파이프라인으로 '컴파일'한 8분 단편 영화

커뮤니티 반응

대체로 긍정적이며, 특히 영화 제작을 소프트웨어 공학적 관점에서 접근한 파이프라인 설계와 자동화된 QA 루프에 대해 높은 관심을 보였다.

주요 논점

01찬성다수

영화 제작을 구조화된 데이터와 자동화된 파이프라인으로 대체하여 제작 효율성과 일관성을 극대화할 수 있다.

합의점 vs 논쟁점

합의점

구조화된 스키마가 AI 생성물의 일관성을 유지하는 데 핵심적인 역할을 한다.
자동화된 QA 루프는 인간의 개입을 최소화하면서도 창작물의 구조적 무결성을 보장하는 효율적인 방법이다.

논쟁점

AI 모델의 비결정적 실행 결과 속에서 창작자의 미세한 예술적 의도를 완벽하게 통제할 수 있는지에 대한 논의가 있다.

실용적 조언

캐릭터 일관성을 위해 구체적인 외형 묘사 문구를 프롬프트에 고정 가중치로 삽입할 것.
AI 영상 제작 시 최소/최대 컷 길이를 정의하는 QA 필터를 구축하여 영상의 페이싱을 조절할 것.

섹션별 상세

영화 제작을 소프트웨어 컴파일 과정으로 재정의했다. 마스터 JSON 스키마에 스토리 비트, 캐릭터 특성, 시네마틱 사양을 정의하고 17단계 AI 파이프라인을 통해 최종 영상을 출력한다. 828.5k 토큰과 139.7분의 연산 시간을 투입하여 8분 길이의 결과물을 얻었다. 이는 창작 의도를 구조화된 데이터로 변환하여 자동화된 제작이 가능함을 입증한다.

3D 리깅 없이 프롬프트 주입만으로 캐릭터 일관성을 유지했다. 얼룩덜룩한 회갈색 갑각과 같은 구체적인 묘사 문구를 모든 프롬프트에 가중치 1.0으로 삽입하여 48개의 모든 샷에서 게의 정체성을 고정한다. 프레임 간 유사도 점수 0.85 이상을 강제하여 시각적 연속성을 확보했다. 모델의 비결정적 특성을 정교한 텍스트 제어로 극복한 사례이다.

자동화된 품질 보증(QA) 루프를 통해 연출 규칙을 강제했다. 생성된 영상이 2초 미만이거나 75초를 초과하는 경우, 또는 전체 런타임이 432초 미만일 경우 파이프라인이 이를 거부하고 재생성을 시작한다. 침묵 프로토콜과 같은 특정 규칙을 통해 특정 장면에서 음성 출력을 강제로 차단하기도 한다. 인간 감독의 개입 없이도 구조적 무결성을 유지하는 메커니즘이다.

멀티모달 AI 스택을 통합하여 시각과 청각 요소를 조율했다. Runway로 비디오를 생성하고 ElevenLabs로 135 WPM 속도의 내레이션을 합성하며, 절차적 드론 톤으로 배경 음악을 구성했다. 최종 마스터링은 YouTube 최적화 기준인 -14 LUFS를 준수하도록 설계됐다. 각 요소가 독립적으로 생성되지만 마스터 스키마라는 단일 진실 공급원(Single Source of Truth)에 의해 통제된다.

언급된 도구

Runway추천

비디오 생성 (s14-vidgen)

ElevenLabs추천

음성 합성 및 내레이션

언급된 리소스

DemoThe Lone Crab (YouTube)

DemoThe concept I am building (YouTube)