SPAR3D + Unreal Dance Editor: animação com IA sem keyframes

Pare o que você está fazendo. Se você é um artista 3D, animador ou desenvolvedor de jogos, o fluxo de trabalho que você usava ontem agora está obsoleto. Costumávamos ter que escolher: passar 3 dias fazendo o rigging de um personagem ou usar IA e ficar com uma malha rígida e quebrada. Essa era acabou hoje de manhã.

Com o lançamento do SPAR3D da Stability AI hoje (8 de janeiro) e o lançamento beta do Unreal Dance Editor (UDE), atingimos a singularidade do "Text-to-Performance". Isso não é apenas uma atualização de ferramenta — é uma nova realidade na qual você pode ir de um esboço em guardanapo a um videoclipe no ritmo perfeito em menos de 10 minutos.

O resultado: um fluxo de trabalho que transforma assets estáticos em dançarinos profissionais instantaneamente.

SPAR3D on HuggingFace Tripo AI Unreal Dance Editor

1. A revolução da "estrutura instantânea"

O primeiro passo é obter o seu asset 3D. Embora este guia foque no novíssimo SPAR3D, a beleza deste fluxo de trabalho é a sua flexibilidade. Você pode usar qualquer gerador de modelos 3D que preferir — seja o Meshy, o Rodin ou uma escultura personalizada. Desde que você consiga um arquivo .OBJ ou .FBX limpo, o Unreal Dance Editor consegue animá-lo.

No entanto, o motivo de todo mundo estar falando sobre o SPAR3D hoje é a sua abordagem única em relação ao volume.

Os modelos antigos adivinhavam a superfície, mas falhavam no teste de volume. O SPAR3D (Stable Point Aware 3D) gera uma nuvem de pontos primeiro, garantindo que o objeto tenha integridade estrutural interna. Isso significa que, quando o personagem se dobra, ele não colapsa como uma casca oca.

A interface do SPAR3D: controle o padding e o guidance scale para obter resultados instantâneos.

Para esta demonstração, usei o Tripo (que se integra diretamente ao fluxo de trabalho) para gerar um personagem a partir de um simples prompt de texto. Ele lida perfeitamente com a geração da "T-pose", o que é crucial para a etapa de auto-rigging.

Tripo: gerando os assets base a partir de prompts de texto como 'Um coelhinho fofo de moletom'.

Personagem de coelho gerado — Do prompt ao asset: os modelos 'Coelho' e 'Homem' gerados em segundos.

Personagem de homem gerado — Do prompt ao asset: os modelos 'Coelho' e 'Homem' gerados em segundos.

2. O motor de ritmo (Unreal Dance Editor)

É aqui que a mágica acontece. O Unreal Dance Editor (UDE) é um plugin que não apenas reproduz animações — ele ouve a música. Ao abri-lo pela barra de ferramentas, você tem acesso a um novo mundo onde pode importar seu personagem e o áudio.

Nota: o UDE está atualmente em beta. As capturas de tela deste artigo são da versão beta compartilhada no Discord deles. A versão beta atual está disponível no Fab marketplace.

A Library do UDE: onde os seus personagens de IA encontram o motor de animação.

Configuração passo a passo:

1
Importação e retarget: arraste o seu modelo do SPAR3D/Tripo para o slot "Target". O UDE mapeia os ossos instantaneamente.
2
A sincronização de áudio: solte o seu MP3 no slot de som. Se a sua faixa tiver mais de 30s, use as Manual Beat Settings para isolar o refrão.
3
A análise: clique em "Analyze Music". A IA detecta BPM, transientes e níveis de energia.

O cérebro: analisando a música e selecionando os estilos 'House' ou 'HipHop'.

3. Dirigindo a IA (sem keyframes)

Após a análise, você não anima — você dirige. Escolha uma vibe (por exemplo, "Charisma/Wild" ou "Cool") e clique em Generate Motion. A timeline se preenche com blocos de movimento sincronizados com a batida.

Não gostou de um movimento específico? Use Shift + Click em um bloco para trocá-lo instantaneamente. É coreografia procedural.

A configuração: pronto para aplicar movimento procedural.

O segredo: o movimento bruto de IA pode ser tremido. O recurso "Smooth Baking" é fundamental — mude a interpolação para "Bezier" e faça o bake da timeline. Isso transforma movimentos robóticos em uma dança fluida e profissional.

O polimento: fazendo o bake da interpolação e gerando câmeras automáticas.

🎬 O resultado: variação infinita

Por fim, clique em "Generate Auto Camera" para que o plugin faça os cortes da cena para você. Planos abertos para giros, close-ups para momentos lentos. Você acabou de criar um videoclipe sem definir um único keyframe.