Stefan VaskevichA Meta acabou de lançar o SAM 3D — expandindo seu famoso Segment Anything Model para a geração 3D. Ele é de código aberto e totalmente gratuito, tornando este um momento marcante para a comunidade de IA 3D.
Fiz o deploy da inferência em Azure A100s e testei todas as capacidades deste modelo. Aqui está minha opinião sincera depois de testar bastante.
Como o SAM 3D funciona
O SAM 3D faz parte da família Segment Anything. Ele recebe imagens, segmenta objetos e depois gera uma representação 3D. Mas aqui está o ponto principal a entender:
Se você usar o Meta playground, o resultado será apenas em Gaussian Splats. Para obter malhas com texturas, você precisa rodar o modelo localmente.
A velocidade é insana
Uma coisa que se destaca imediatamente: a geração é incrivelmente rápida. Essa é uma grande vantagem em relação a muitas outras ferramentas de geração 3D que podem levar minutos por geração.
Requisitos de sistema
A documentação da Meta indica um mínimo de 32GB de VRAM, mas consegui rodar a geração de geometria com menos de 12GB de VRAM — isso inclui Gaussian Splats e saída de malha.
No entanto, para o pipeline completo com texturas, você precisará de mais VRAM e do Linux.
Qualidade: SAM 3D vs Hunyuan 2.1
A Meta alega uma taxa de preferência de 80% em comparação com outros modelos de código aberto. Eu comparei diretamente com o Hunyuan 2.1.
Minha avaliação sincera? Não é bem 80%. Eu diria algo como 60-70% de preferência — mas é definitivamente melhor do que o Hunyuan 2.1 em muitos casos.
No que ele é bom (e ruim)
Funciona bem para
- • Móveis e props
- • Objetos de ambiente
- • Formas geométricas simples
- • Prototipagem rápida
Tem dificuldades com
- • Personagens e rostos
- • Formas orgânicas
- • Texto e detalhes finos
- • Texturas em alta resolução (máximo de 2K, ainda borradas)
As texturas tendem a ficar borradas mesmo na resolução máxima de 2K. Isso acontece porque os Gaussian Splats são convertidos em malha com texturas bakeadas — o processo de conversão perde alguns detalhes.
A malha em si é relativamente simples, mas a precisão geral da forma é bastante boa para um modelo de código aberto.
Casos de uso ideais
O caso de uso do SAM 3D é um tanto restrito, mas específico:
- •Desenvolvimento para VR/AR — Criação rápida de props para ambientes
- •Desenvolvedores da Unreal Engine — Prototipagem rápida de objetos de cena
- •Fluxos de trabalho com Gaussian Splats — Se você já trabalha com splats
Para fluxos de trabalho 3D tradicionais (Blender, Maya, etc.), a saída em Gaussian Splats pode ser um obstáculo. Abrir e converter splats não é tão simples quanto importar um arquivo GLB ou OBJ.
O veredito
O SAM 3D é um lançamento genuinamente empolgante para a comunidade de IA 3D de código aberto. A velocidade é impressionante e, para certos casos de uso — especialmente móveis, props e objetos de ambiente — ele entrega resultados sólidos.
As limitações são reais: apenas para Linux, saída em Gaussian Splats, texturas borradas e dificuldades com formas orgânicas. Mas o fato de esse modelo existir, ser de código aberto e estar avançando é absolutamente incrível para a área.
Conclusão: Se você é um desenvolvedor Unreal criando props para VR/AR, ou se já trabalha com Gaussian Splats, vale a pena experimentar o SAM 3D. Para fluxos de trabalho 3D tradicionais, as outras ferramentas no nosso ranking ainda podem ser mais práticas.
