Stability AI, la compañía detrás del modelo de imagen Stable Diffusion AI, presentó una tecnología llamada TripoSR. Se trata de un modelo que genera modelos 3D de alta calidad a partir de una sola imagen en menos de un segundo.
TripoSR está diseñado para satisfacer las crecientes demandas de los profesionales del entretenimiento, los juegos, el diseño industrial y la arquitectura, ofreciendo resultados receptivos para visualizar objetos 3D detallados.
De acuerdo con Stability AI, cuando se prueba en una GPU Nvidia A100, puede generar salidas 3D con calidad de borrador, completas con mallas texturizadas, en solo 0,5 segundos, superando a otros modelos abiertos de imagen a 3D como OpenLRM.
TE PUEDE INTERESAR: Genie: la IA de Google para crear videojuegos a partir de imágenes
Cómo funciona TripoSR
- Los usuarios sin acceso a GPU potentes pueden aprovechar sus capacidades, ya que el modelo está optimizado para ejecutarse con bajos presupuestos de inferencia, según el comunicado de prensa.
- El equipo de Stability AI y Tripo AI introdujeron mejoras técnicas en el modelo base, como la optimización del número de canales, la supervisión de máscaras y una estrategia de renderizado de cultivos más eficiente, todo lo cual contribuye al impresionante rendimiento del modelo.
- El código fuente del modelo TripoSR está disponible en el repositorio de GitHub de Tripo AI.
- Se puede acceder al código desde el GitHub de Tripo AI, mientras que los pesos de los modelos están disponibles en Hugging Face.
Cómo usar TripoSR
- Descarga o accede al modelo desde Hugging Face.
- Utiliza el código proporcionado para cargar el modelo y los pesos.
- Sube la imagen 2D al modelo.
- El modelo generará automáticamente un modelo 3D correspondiente.
- El resultado será una malla 3D que representa el objeto en la imagen.
- Puedes visualizarlo, rotarlo, escalarlo y explorarlo en software de visualización 3D como Blender, MeshLab o Three.js.
- Si es necesario, puedes realizar ajustes manuales en la malla generada para mejorar detalles específicos. También puedes aplicar texturas o materiales para darle más realismo.
Foto: Stability AI