Tutorial do AI Movie Studio V2 ComfyUI: Instalação, Conexão e Criação de uma Cena

AI Overview

O que é AI Movie Studio 2?

É um ambiente de produção cinematográfica de código aberto para organizar cenas, referências e tomadas, ao mesmo tempo em que envia tarefas de geração para instâncias locais de ComfyUI ou provedores em nuvem.

Preciso de ComfyUI para usar AI Movie Studio 2?

Você precisa de ComfyUI para geração local. Drivers exclusivos de nuvem podem funcionar sem GPU local, mas exigem as credenciais relevantes do provedor.

Quais portas a configuração local utiliza?

As portas padrão são ComfyUI na porta 8188, o backend na porta 8001 e o frontend na porta 3000. Verifique cada serviço antes de solucionar problemas de geração.

Posso importar meu próprio fluxo de trabalho ComfyUI?

Sim. Exporte API JSON, registre-o nas Configurações e, em seguida, resolva quaisquer pontos de verificação ausentes, LoRAs, VAEs ou codificadores antes de executá-lo.

O que AI Movie Studio 2 acrescenta ao ComfyUI

Este tutorial AI Movie Studio V2 ComfyUI começa com uma distinção essencial para evitar a maior parte da confusão: o ComfyUI permanece como o mecanismo de geração, enquanto o AI Movie Studio 2 atua como uma estação de trabalho cinematográfica ao seu redor. Em vez de reconstruir um único grafo gigantesco para todo o projeto, você organiza o projeto em cenas, referências e tomadas, enviando então tarefas específicas de imagem ou vídeo por meio de um driver.

O projeto atual descreve um fluxo de trabalho baseado em navegador e independente de modelo. Suas ferramentas incluem um palco de câmera 3D, predefinições de tomada, geração com múltiplas referências, variações de prompt, refilmagens, seleção de LoRA, linha do tempo, diálogo e áudio, além de exportação XML para um editor. A interface pode chamar instâncias locais de ComfyUI ou APIs em nuvem compatíveis. Como o projeto está em desenvolvimento ativo, trate o arquivo README e o painel de Configurações na versão instalada como a fonte oficial da verdade; nomes e recursos experimentais podem mudar rapidamente.

Essa estrutura é útil quando seu problema real é a continuidade, e não apenas um quadro perfeito isolado. Uma receita de cena pode conter as referências de personagem, localização e objetos de cena. Uma tomada pode registrar o ângulo escolhido e a receita de geração. Uma tomada rejeitada pode ser reexecutada sem apagar o storyboard aprovado ao seu redor.

Um conceito original de saída final para este guia. O casaco vermelho, a mala prateada, o motel, o carro retrô, a chuva e a lua exageradamente grande formam uma receita de continuidade que pode ser verificada entre diferentes tomadas.

Antes de instalar

Escolha entre geração local, remota ou em nuvem

A geração local com ComfyUI oferece controle direto sobre modelos e nós, mas exige que você gerencie o ambiente da GPU, os arquivos de modelo e os nós personalizados. Um servidor remoto de ComfyUI mantém esse controle de grafo em outra máquina. Drivers em nuvem reduzem o esforço de instalação, mas introduzem custos do provedor, credenciais e limites específicos do serviço. O guia comparativo entre geração de vídeo IA local e em nuvem ajuda a avaliar essa escolha operacional antes de investir em uma configuração.

Para a instalação manual atual, planeje usar Python 3.10 ou superior, Node.js 18 ou superior e uma instância em execução de ComfyUI. As recomendações oficiais de hardware indicam 8 GB de VRAM como nível mínimo para trabalhos com imagens e clipes curtos, 12–16 GB como faixa mais ampla de uso prático e 24 GB ou mais para cargas mais pesadas, como geração com múltiplas referências ou em lote. Essas são recomendações do projeto, não garantias: seu modelo, resolução, contagem de quadros e quantização determinam o uso real de memória.

Mantenha o primeiro teste intencionalmente pequeno

Prepare um retrato de personagem, uma referência de localização e um fluxo de trabalho simples de imagem que já funcione diretamente no ComfyUI. Não comece com uma tomada longa, múltiplos LoRAs, clonagem de voz e um novo modelo de vídeo simultaneamente. Um pequeno trabalho previamente testado e funcional indica se a conexão e o mapeamento do driver estão corretos antes que a complexidade criativa interfira no diagnóstico.

Tutorial AI Movie Studio V2 ComfyUI

1. Inicie o ComfyUI e verifique a porta 8188

Inicie o ComfyUI em seu próprio terminal e confirme se sua interface no navegador abre. A configuração padrão do AI Movie Studio espera http://127.0.0.1:8188. Se seu servidor usar outro endereço, um proxy reverso ou autenticação, anote-o antes de configurar a estação de trabalho. Não exponha uma instância não autenticada de ComfyUI à internet pública apenas para facilitar a conexão.

cd /path/to/ComfyUI
python main.py

Enfileire primeiro o pequeno fluxo de trabalho previamente testado e funcional dentro do ComfyUI. Se isso falhar, corrija o ComfyUI antes de envolver o AI Movie Studio 2.

2. Instale e inicie o backend

No diretório backend do repositório, instale as dependências Python. O comando atual para iniciar manualmente o backend lança a API na porta 8001; abra seu ponto de verificação de integridade (health endpoint) e exija uma resposta bem-sucedida antes de prosseguir.

cd backend
pip install -r requirements.txt
python main.py serve --reload

Mantenha segredos de provedores fora de capturas de tela e arquivos versionados. O ComfyUI local funciona sem chaves de nuvem. Se você adicionar posteriormente um provedor compatível nas Configurações, confirme o que é armazenado localmente e reinicie o backend sempre que a versão atual exigir essa ação.

3. Instale e inicie o frontend

Use um terceiro terminal para o frontend. Após a instalação das dependências, o servidor de desenvolvimento normalmente abre na porta 3000 e encaminha solicitações para o backend.

cd frontend
npm install
npm run dev
```Crie um projeto somente após o carregamento do navegador e a aprovação da verificação de integridade do backend. Se a interface abrir, mas todas as gerações falharem instantaneamente, inspecione a conexão entre o backend e o ComfyUI, em vez de reinstalar o frontend.

### 4. Use Docker quando a reprodutibilidade for essencial

A rota Docker inicia a pilha de aplicações com um único comando, mas não containeriza o ComfyUI no design atual do projeto. O ComfyUI ainda é executado diretamente na máquina hospedeira (host), normalmente na porta 8188, e o contêiner do backend acessa-o por meio de `host.docker.internal`. Ambos os serviços de aplicação vinculam-se ao localhost por padrão, e os dados do projeto persistem por meio de *bind mounts*.

```text
docker compose up --build

O Docker reduz a divergência nas configurações do Python e do Node.js. No entanto, ele não resolve problemas como arquivos de modelo ausentes, um servidor ComfyUI instável ou um fluxo de trabalho que faz referência a nós indisponíveis.

Uma configuração bem-sucedida deve gerar uma nova composição sem perder o personagem, o casaco vermelho, a mala, o carro, a lua ou a lógica de iluminação.

Registre um Fluxo de Trabalho Personalizado do ComfyUI

Exporte o API JSON, não o arquivo visual do fluxo de trabalho

Construa e teste o grafo diretamente no ComfyUI, depois salve-o no formato de API. O JSON de execução é o que uma aplicação externa pode enfileirar. Use um fluxo de trabalho limpo, com pontos de entrada explícitos para prompt, semente (seed), largura, altura e imagem de origem. Um grafo que dependa de estado local oculto é mais difícil de controlar de forma confiável por qualquer controlador (driver).

Abra as Configurações no AI Movie Studio 2, localize “Fluxos de Trabalho Personalizados do ComfyUI” e adicione o JSON exportado. Atribua-lhe um nome de exibição estável, um ID de controlador (driver ID) e uma categoria de imagem ou vídeo. O analisador atual de fluxos de trabalho verifica referências a checkpoints, LoRAs, VAEs, CLIP ou codificadores de texto, UNets, ControlNets e upscalers, comparando-os com a instância conectada do ComfyUI.

Resolva os modelos antes de testar os parâmetros

Um aviso sobre modelo ausente difere de um problema de qualidade de geração. Coloque cada arquivo no diretório esperado pelo respectivo nó, atualize a lista de modelos e confirme se o aviso desaparece. Somente então ajuste etapas (steps), CFG, semente (seed) ou intensidade do LoRA. Essa ordem evita que um simples erro de caminho se transforme em horas de experimentação com prompts.

Quando o fluxo de trabalho aparecer no seletor de modelos, execute o mesmo pequeno exemplo de referência e prompt usados no teste direto no ComfyUI. Compare as dimensões da saída, o comportamento da semente (seed) e os arquivos salvos. Se os resultados diferirem, examine quais valores dos controles (widgets) são sobrescritos pelo controlador (driver) e quais permanecem nos valores padrão definidos no JSON.

A tomada em ângulo reverso acrescenta novas informações, mantendo espacialmente legíveis a mala prateada, a porta de entrada, o carro e a lua.

Construa uma Sequência Consistente de Múltiplas Tomadas

Crie a receita da cena antes da lista de tomadas

No exemplo do motel, defina uma única vez a mulher, o casaco vermelho, a mala prateada, o balconista, o balcão de recepção, o carro retrô, a chuva, as luminárias âmbar e a lua oversized. Atribua um papel a cada referência. Em seguida, planeje três tomadas: chegada externa, troca no balcão e retorno ao carro. A câmera pode mudar, mas a receita informa aos revisores o que deve ser mantido.

Gere quadros de storyboard antes do vídeo. Use um enquadramento amplo para estabelecer a geografia, um enquadramento médio para a entrega da mala e uma tomada final ampla que restabeleça a visão externa. Se um quadro alterar o ator ou reposicionar o carro, rejeite-o antes de investir em movimento. O fluxo de trabalho de vídeo com IA multmodelo explica como uma única lista de verificação de aceitação pode ser mantida mesmo quando diferentes tomadas utilizam motores distintos.

Amostra final de continuidade ambiental com três tomadas

Uma saída gerada previamente de nossa biblioteca multimídia, não um benchmark do AI Movie Studio 2. Verifique se a arquitetura, a iluminação e o posicionamento do sujeito permanecem coerentes entre as tomadas.

Revise o movimento e salve a receita de geração

Transforme apenas os quadros aprovados em clipes. Assista cada resultado em velocidade normal para identificar alterações faciais, deslizamento dos pés, deformação de objetos, inversões de câmera e mudanças bruscas de iluminação. Salve a semente (seed), o prompt, o ID do fluxo de trabalho, as escolhas de modelo e as intensidades do LoRA juntamente com a tomada. Sem essa receita, uma “refilmagem” torna-se um novo experimento, em vez de uma correção controlada.

Para trabalhos repetitivos, processe em lote (batch) somente após a aprovação de uma tomada representativa. O guia de processamento em lote do ComfyUI mostra como preservar um manifesto de entrada, isolar falhas e manter as saídas rastreáveis, em vez de confiar em uma fila longa e não supervisionada.

A tomada final comprova a continuidade a uma distância maior: a silhueta do personagem, o objeto, o balconista, o carro, o motel e a lua permanecem todos reconhecíveis.

Quando o Seedance Agent É a Rota Mais Rápida

AI Movie Studio 2 mais ComfyUI é atraente quando você deseja controle local, nós personalizados, JSON de fluxo de trabalho, arquivos específicos de modelos e acesso direto a parâmetros. Esse controle também significa que você é responsável pela instalação, atualizações, mapeamento de drivers, modelos ausentes, capacidade da GPU e recuperação de falhas. Para um criador técnico, o custo de manutenção pode ser justificável. Já para uma equipe de marketing que, principalmente, precisa de uma sequência aprovada, isso pode se tornar uma segunda tarefa produtiva.

Seedance Agent aborda a mesma tarefa de produção cinematográfica a partir das camadas de briefing e revisão. Forneça ao sistema o público-alvo, o conceito, referências, proporção de aspecto, duração e regras de aceitação; revise o roteiro e o plano de tomadas propostos antes da geração paga; em seguida, rejeite ou reexecute apenas as tomadas fracas. Você ainda pode usar o gerador de vídeo a partir de texto ou o gerador de vídeo a partir de imagem para testes diretos, mas o agente mantém juntos as referências, decisões e histórico de revisões.

Seedance Agent finished product-ad output

Essa saída Seedance Agent existente demonstra a alternativa de entrega: um resultado em movimento passível de revisão, em vez de uma tela de configuração local.

Escolha com base no trabalho que você deseja gerenciar diretamente. Use a pilha local quando a experimentação em nível de nó for o objetivo principal. Use um fluxo de trabalho com agente hospedado quando planejamento mais ágil, aprovações, verificações de continuidade e reexecuções seletivas forem mais importantes do que gerenciar a infraestrutura.

Conclusão

Uma configuração confiável de AI Movie Studio V2 ComfyUI começa com três serviços saudáveis, um fluxo de trabalho previamente validado e um pequeno teste de referência. Conecte ComfyUI antes de adicionar complexidade criativa, registre fluxos de trabalho no formato de API somente após executá-los diretamente, resolva a ausência de modelos antes de ajustar parâmetros e preserve uma receita de geração para cada tomada aprovada. Quando você deseja aplicar a mesma disciplina de planejamento de cenas e revisão sem precisar manter a pilha local, inicie sua próxima sequência com Seedance Agent.