Stefan VaskevichMeta acaba de lanzar SAM 3D, una versión de su famoso Segment Anything Model para la generación 3D. Es de código abierto y completamente gratuito, lo que hace de este un momento importante para la comunidad de 3D con IA.
Desplegué la inferencia en Azure A100s y probé todas las capacidades de este modelo. Aquí está mi opinión honesta después de probarlo a fondo.
Cómo funciona SAM 3D
SAM 3D es parte de la familia Segment Anything. Toma imágenes, segmenta objetos y luego genera una representación 3D. Pero esto es lo fundamental que debes entender:
Si usas el playground de Meta, solo obtendrás como resultado Gaussian Splats. Para obtener mallas con texturas, necesitas ejecutar el modelo localmente.
La velocidad es una locura
Algo que destaca de inmediato: la generación es increíblemente rápida. Esta es una gran ventaja frente a muchas otras herramientas de generación 3D que pueden tardar minutos por generación.
Requisitos del sistema
La documentación de Meta indica un mínimo de 32GB de VRAM, pero logré ejecutar la generación de geometría con menos de 12GB de VRAM — eso incluye la generación tanto de Gaussian Splats como de mallas.
Sin embargo, para el pipeline completo con texturas, necesitarás más VRAM y Linux.
Calidad: SAM 3D vs. Hunyuan 2.1
Meta afirma tener una tasa de preferencia del 80% sobre otros modelos de código abierto. Lo comparé directamente contra Hunyuan 2.1.
¿Mi evaluación honesta? No llega al 80%. Yo diría que es más bien una preferencia del 60-70% — pero definitivamente es mejor que Hunyuan 2.1 en muchos casos.
En qué es bueno (y malo)
Funciona bien para
- • Muebles y props
- • Objetos de entorno
- • Formas geométricas simples
- • Prototipado rápido
Tiene dificultades con
- • Personajes y rostros
- • Formas orgánicas
- • Texto y detalles finos
- • Texturas en alta resolución (máximo 2K, todavía borrosas)
Las texturas tienden a ser borrosas incluso a la resolución máxima de 2K. Esto se debe a que los Gaussian Splats se convierten en una malla con texturas horneadas — durante la conversión se pierde algo de detalle.
La malla en sí es relativamente simple, pero la precisión general de la forma es bastante buena para un modelo de código abierto.
Casos de uso ideales
El caso de uso para SAM 3D es algo acotado pero específico:
- •Desarrollo en VR/AR — Creación rápida de props para entornos
- •Desarrolladores de Unreal Engine — Prototipado rápido de objetos de escena
- •Flujos de trabajo con Gaussian Splats — Si ya trabajas con splats
Para los flujos de trabajo tradicionales en 3D (Blender, Maya, etc.), la salida en Gaussian Splats puede ser un obstáculo. Abrir y convertir splats no es tan sencillo como importar un archivo GLB o OBJ.
El veredicto
SAM 3D es un lanzamiento realmente emocionante para la comunidad de 3D con IA de código abierto. La velocidad es impresionante y, para ciertos casos de uso —especialmente muebles, props y objetos de entorno—, ofrece resultados sólidos.
Las limitaciones son reales: solo para Linux, salida en Gaussian Splats, texturas borrosas y dificultades con formas orgánicas. Pero el hecho de que este modelo exista, sea de código abierto y esté avanzando es absolutamente increíble para este campo.
En conclusión: Si eres un desarrollador de Unreal y haces props para VR/AR, o ya trabajas con Gaussian Splats, vale la pena probar SAM 3D. Para los flujos de trabajo tradicionales en 3D, las otras herramientas de nuestra tabla de clasificación aún podrían ser más prácticas.
