AI Movie Studio V2 ComfyUI 튜토리얼: 설치, 연결 및 장면 제작

AI Overview

AI Movie Studio 2란 무엇인가요?

AI Movie Studio 2는 장면, 참조 자료 및 촬영 샷을 체계적으로 정리하면서 로컬 ComfyUI 또는 클라우드 공급자로 생성 작업을 전송하는 오픈소스 영화 제작 워크스페이스입니다.

AI Movie Studio 2를 사용하려면 ComfyUI가 꼭 필요한가요?

로컬 생성을 위해서는 ComfyUI가 필요합니다. 클라우드 전용 드라이버는 로컬 GPU 없이도 작동하지만, 해당 공급자의 인증 정보가 반드시 필요합니다.

로컬 설정에서 어떤 포트를 사용하나요?

기본 포트는 ComfyUI가 8188번, 백엔드가 8001번, 프론트엔드가 3000번입니다. 생성 작업 문제 해결 전에 각 서비스의 정상 동작을 반드시 확인하세요.

내 자체 ComfyUI 워크플로를 가져올 수 있나요?

가능합니다. API JSON을 내보낸 후 설정(Settings)에서 등록하고, 실행 전 누락된 체크포인트, LoRAs, VAE 또는 인코더를 모두 해결하세요.

AI Movie Studio 2가 ComfyUI에 추가하는 기능

이 AI Movie Studio V2 ComfyUI 튜토리얼은 혼란을 방지하기 위한 핵심 구분점에서 시작합니다: ComfyUI는 여전히 생성 엔진으로 남아 있고, AI Movie Studio 2는 이를 둘러싼 영화 제작 워크스테이션 역할을 합니다. 전체 프로젝트를 하나의 거대한 그래프로 재구성하는 대신, 프로젝트를 장면, 참조 자료 및 촬영 샷 단위로 조직화한 후 특정 이미지 또는 비디오 작업을 드라이버를 통해 전송합니다.

현재 프로젝트는 브라우저 기반의 모델 무관 워크플로를 설명합니다. 제공되는 도구에는 3D 카메라 스테이지, 촬영 샷 사전 설정(preset), 다중 참조 생성, 프롬프트 변형, 리테이크(retake), LoRA 선택, 타임라인, 대사 및 오디오, 편집기용 XML 내보내기 등이 포함됩니다. 인터페이스는 로컬 ComfyUI 또는 지원되는 클라우드 API를 호출할 수 있습니다. 이 프로젝트는 활발히 개발 중이므로, 설치된 버전의 README 및 설정(Settings) 패널을 사실의 최종 근거로 삼으십시오. 이름과 실험적 기능은 빠르게 변경될 수 있습니다.

이 구조는 단일 아름다운 프레임보다 연속성(continuity)이 진정한 과제인 경우 유용합니다. 장면 레시피(scene recipe)는 캐릭터, 장소, 소도구 등의 참조 자료를 보관할 수 있고, 촬영 샷(shot)은 선택된 각도와 생성 레시피를 기록할 수 있습니다. 거부된 테이크(rejected take)는 수락된 스토리보드를 지우지 않고도 다시 실행할 수 있습니다.

이 가이드를 위한 원본 완성 출력 개념 이미지입니다. 빨간 코트, 은색 케이스, 모텔, 빈티지 자동차, 비, 그리고 과장된 크기의 달은 촬영 샷 간 일관성을 검증할 수 있는 연속성 레시피를 구성합니다.

설치 전 준비 사항

로컬, 원격 또는 클라우드 생성 방식 선택

로컬 ComfyUI는 직접적인 모델 및 노드 제어를 제공하지만, GPU 환경, 모델 파일, 커스텀 노드를 직접 관리해야 합니다. 원격 ComfyUI 서버는 그래프 제어 권한을 다른 기기로 이전합니다. 클라우드 드라이버는 설치 작업을 줄여주지만, 공급자 요금제, 인증 정보, 서비스별 제한 사항을 고려해야 합니다. 로컬 vs 클라우드 AI 비디오 생성기 가이드는 설정에 투자하기 전에 이러한 운영적 선택을 명확히 해줄 수 있습니다.

현재 수동 설치를 위해 Python 3.10 이상, Node.js 18 이상, 그리고 실행 중인 ComfyUI 인스턴스를 준비해야 합니다. 공식 하드웨어 권장 사양에 따르면, 이미지 작업 및 짧은 클립 제작을 위한 최소 VRAM 용량은 8GB이며, 보다 폭넓은 작업 범위는 12–16GB, 다중 참조 또는 대량 배치 처리 등 고부하 작업에는 24GB 이상이 권장됩니다. 이는 프로젝트 차원의 권장 사항일 뿐 보장된 사양은 아니며, 실제 메모리 사용량은 사용 모델, 해상도, 프레임 수, 양자화 수준에 따라 달라집니다.

첫 번째 테스트는 의도적으로 작게 수행하세요

한 명의 캐릭터 초상화, 한 개의 장소 참조 자료, 그리고 ComfyUI에서 이미 성공적으로 실행되는 간단한 이미지 워크플로 하나를 준비하세요. 긴 테이크, 여러 LoRA 사용, 음성 복제, 새로운 비디오 모델 등을 동시에 시작하지 마세요. 작고 검증된 작업 하나를 먼저 실행하면 창의적 복잡성이 진단 과정에 개입하기 전에 연결 및 드라이버 매핑이 제대로 작동하는지 확인할 수 있습니다.

AI Movie Studio V2 ComfyUI 튜토리얼

1. ComfyUI 시작 및 포트 8188 확인

별도 터미널에서 ComfyUI를 실행하고 브라우저 인터페이스가 열리는지 확인하세요. 기본 AI Movie Studio 설정은 http://127.0.0.1:8188을 기대합니다. 서버가 다른 주소, 리버스 프록시 또는 인증을 사용하는 경우, 워크스테이션 설정 전에 해당 정보를 기록해 두세요. 연결을 쉽게 하기 위해 인증되지 않은 ComfyUI 인스턴스를 공용 인터넷에 노출시키지 마세요.

cd /path/to/ComfyUI
python main.py

먼저 ComfyUI 내부에서 작은 검증된 워크플로를 큐에 등록하세요. 실패할 경우, AI Movie Studio 2를 개입시키기 전에 ComfyUI 자체를 먼저 복구하세요.

2. 백엔드 설치 및 시작

저장소의 백엔드 디렉터리에서 Python 종속성 패키지를 설치하세요. 현재 수동 실행 명령은 포트 8001에서 API를 시작하며, 다음 단계로 넘어가기 전에 상태 확인 엔드포인트(health endpoint)에 성공적으로 응답하는지 반드시 확인하세요.

cd backend
pip install -r requirements.txt
python main.py serve --reload

공급자 비밀 정보는 스크린샷이나 커밋된 파일에 포함하지 마세요. 로컬 ComfyUI는 클라우드 키 없이도 작동합니다. 이후 설정(Settings)에서 지원되는 공급자를 추가할 경우, 로컬에 저장되는 내용을 확인하고 현재 빌드에서 요구될 때 백엔드를 재시작하세요.

3. 프론트엔드 설치 및 시작

프론트엔드는 별도 터미널에서 실행하세요. 종속성 설치 후 개발 서버는 일반적으로 포트 3000에서 시작되며, 요청을 백엔드로 프록시합니다.

cd frontend
npm install
npm run dev
```브라우저가 로드되고 백엔드 건강 상태 점검이 성공한 후에만 프로젝트를 생성하세요. 인터페이스는 열리지만 모든 생성 작업이 즉시 실패하는 경우, 프론트엔드를 재설치하기보다는 백엔드와 ComfyUI 간 연결을 점검하세요.

### 4. 반복성이 중요한 경우 Docker 사용

Docker 라우트는 하나의 명령어로 애플리케이션 스택을 시작하지만, 현재 프로젝트 설계에서는 ComfyUI를 컨테이너화하지 않습니다. ComfyUI는 여전히 호스트에서 실행되며, 일반적으로 포트 8188에서 동작하고, 백엔드 컨테이너는 `host.docker.internal`을 통해 이를 접근합니다. 두 애플리케이션 서비스 모두 기본적으로 localhost에 바인딩되며, 프로젝트 데이터는 바인드 마운트를 통해 지속됩니다.

```text
docker compose up --build

Docker는 Python 및 Node 설정 편차를 줄여줍니다. 그러나 누락된 모델 파일, 비정상적인 ComfyUI 서버 또는 사용 불가능한 노드를 참조하는 워크플로우 문제는 해결하지 못합니다.

성공적인 설정은 캐릭터, 빨간 코트, 케이스, 자동차, 달, 조명 로직을 잃지 않고 새로운 컴포지션을 생성해야 합니다.

사용자 정의 ComfyUI 워크플로우 등록

시각적 워크플로우 파일이 아닌 API JSON 내보내기

ComfyUI에서 그래프를 직접 구축하고 테스트한 후, API 형식으로 저장하세요. 실행용 JSON이 외부 애플리케이션이 큐에 넣을 수 있는 형식입니다. 프롬프트, 시드, 너비, 높이, 소스 이미지 등 명확한 입력 포인트를 갖춘 깔끔한 워크플로우를 사용하세요. 숨겨진 로컬 상태에 의존하는 그래프는 어떤 드라이버도 신뢰성 있게 제어하기 어렵습니다.

AI Movie Studio 2에서 설정(Settings)을 열고 ‘사용자 정의 ComfyUI 워크플로우(Custom ComfyUI Workflows)’를 찾아 내보낸 JSON을 추가하세요. 안정적인 표시 이름, 드라이버 ID, 이미지 또는 비디오 카테고리를 지정하세요. 현재 워크플로우 분석기는 체크포인트, LoRAs, VAE, CLIP 또는 텍스트 인코더, UNet, ControlNet, 업스케일러 등을 참조하는지 스캔한 후, 연결된 ComfyUI 인스턴스와 비교합니다.

매개변수 테스트 전에 모델 해상

모델 누락 경고는 생성 품질 문제와 다릅니다. 각 파일을 해당 노드가 기대하는 디렉토리에 배치하고, 모델 목록을 새로 고침하여 경고가 사라졌는지 확인하세요. 그 후에야 스텝 수, CFG, 시드 또는 LoRA 강도를 조정하세요. 이 순서를 따르면 단순한 경로 불일치가 수 시간에 걸친 프롬프트 실험으로 확대되는 것을 방지할 수 있습니다.

워크플로우가 모델 선택기에 나타나면, 직접 ComfyUI에서 테스트할 때 사용했던 동일한 작은 기준 샘플과 프롬프트를 실행하세요. 출력 차원, 시드 동작, 저장된 파일을 비교하세요. 결과가 다르다면, 드라이버가 오버라이드하는 위젯 값과 JSON 기본값으로 남아 있는 값을 점검하세요.

역각 촬영은 새 정보를 추가하면서도 핵심 은색 케이스, 출입문, 자동차, 달의 공간적 가독성을 유지합니다.

일관된 멀티샷 시퀀스 구축

샷 목록보다 먼저 장면 레시피 작성

모텔 예시의 경우, 여성 캐릭터, 빨간 코트, 은색 케이스, 클러크, 프런트 데스크, 빈티지 자동차, 비, 앰버 실용 조명(amber practicals), 과장된 달을 한 번만 정의하세요. 모든 참조 요소에 역할을 부여하세요. 그런 다음 세 개의 샷을 계획하세요: 외부 도착, 카운터 교류, 자동차 복귀. 카메라는 변경될 수 있지만, 레시피는 검토자에게 반드시 유지되어야 할 요소를 명시합니다.

영상 제작 전에 스토리보드 프레임을 생성하세요. 지리적 배경을 설정하기 위해 광각 프레임을, 케이스 인수도를 위해 중간 프레임을, 외부 장면을 복원하기 위해 마무리 광각 샷을 사용하세요. 프레임이 배우를 변경하거나 자동차 위치를 옮긴다면, 모션 제작 비용을 지불하기 전에 거부하세요. 멀티모델 AI 영상 워크플로우에서는 서로 다른 엔진을 사용하는 다양한 샷에서도 동일한 승인 체크리스트가 유지될 수 있는 방법을 설명합니다.

완성된 3샷 환경 연속성 샘플

미디어 라이브러리에서 가져온 기존 생성물이며, AI Movie Studio 2 벤치마크가 아닙니다. 건축, 조명, 피사체 배치가 샷 간에 일관되게 유지되는지 확인하세요.

모션 검토 및 생성 레시피 저장

승인된 프레임만 클립으로 전환하세요. 각 결과를 정상 속도로 재생하며 얼굴 변화, 발 미끄러짐, 소품 변형, 카메라 반전, 급격한 조명 변화를 확인하세요. 시드, 프롬프트, 워크플로우 ID, 모델 선택, LoRA 강도를 샷과 함께 저장하세요. 이 레시피 없이는 ‘리테이크’가 통제된 수정이 아니라 새로운 실험이 되어 버립니다.

반복 작업의 경우, 대표 샷 하나가 통과한 후에만 배치 처리하세요. ComfyUI 배치 처리 가이드에서는 입력 매니페스트를 보존하고, 실패 사례를 격리하며, 출력을 추적 가능하게 유지하는 방법을 설명하며, 장시간 무감독 실행 대기열에 맡기는 것보다 훨씬 신뢰할 수 있습니다.

마무리 프레임은 더 넓은 거리에서도 연속성을 입증합니다: 캐릭터 실루엣, 소품, 클러크, 자동차, 모텔, 달 모두 식별 가능합니다.

Seedance Agent이 더 빠른 경로가 될 때

AI Movie Studio 2와 ComfyUI를 함께 사용하는 방식은 로컬 제어, 사용자 정의 노드, 워크플로우 JSON, 특정 모델 파일, 그리고 직접적인 파라미터 액세스가 필요할 때 매력적입니다. 이러한 제어 권한은 곧 설치, 업데이트, 드라이버 매핑, 누락된 모델, GPU 용량, 장애 복구 등 전반에 걸친 책임을 사용자가 직접 맡는다는 의미이기도 합니다. 기술 중심의 창작자에게는 이러한 유지보수 비용이 충분히 가치 있을 수 있습니다. 반면, 주로 승인된 시퀀스만 필요로 하는 마케팅 팀의 경우, 이는 또 다른 제작 업무로 전환될 수 있습니다.

Seedance Agent은 동일한 영상 제작 작업을 기획 및 검토 단계에서 접근합니다. 대상 관객, 컨셉, 참고 자료, 화면 비율, 지속 시간, 승인 기준을 제공하고, 유료 생성을 시작하기 전에 제안된 대본과 촬영 계획을 검토한 후, 약점이 있는 장면만 거부하거나 재실행할 수 있습니다. 여전히 텍스트-비디오 생성기나 이미지-비디오 생성기를 직접 테스트용으로 활용할 수 있지만, 에이전트는 참고 자료, 의사결정 사항, 검토 이력을 모두 통합하여 관리합니다.

Seedance Agent finished product-ad output

이 기존 Seedance Agent 출력물은 대안적인 산출물을 보여줍니다: 로컬 설정 화면이 아니라 검토 가능한 동적 결과물입니다.

당신이 직접 관리하고 싶은 작업 유형에 따라 선택하세요. 노드 수준의 실험이 목표라면 로컬 스택을 사용하세요. 빠른 기획, 승인, 연속성 점검, 그리고 선택적 재실행이 인프라 관리보다 더 중요하다면 호스팅된 에이전트 워크플로우를 사용하세요.

결론

신뢰할 수 있는 AI Movie Studio V2 ComfyUI 설정은 세 가지 건강한 서비스, 하나의 검증된 워크플로우, 하나의 소규모 참조 테스트로 시작합니다. 창의적 복잡성을 추가하기 전에 먼저 ComfyUI를 연결하고, API 형식 워크플로우는 직접 실행이 확인된 후에만 등록하며, 파라미터 조정 전에 누락된 모델 문제를 해결하고, 승인된 모든 장면에 대해 생성 레시피를 반드시 보관하세요. 로컬 스택을 유지하지 않으면서도 동일한 장면 기획 및 검토 체계를 원한다면, 다음 시퀀스를 Seedance Agent으로 시작하세요.