¡El mejor generador de IA 3D ahora se ejecuta de forma nativa en ComfyUI! (Gratis y local)

1. Trellis 2 y PixArt-α ahora son nativos en ComfyUI [0]

Trellis 2 y PixArt-α, los mejores generadores de IA 3D de código abierto, ahora están integrados de forma nativa en ComfyUI, lo que elimina las dependencias y permite la generación local con solo 6 GB de VRAM.

1.1. Novedades y requisitos del sistema [0]

1. Integración nativa en ComfyUI [0]
   1. Trellis 2 y PixArt-α ahora están integrados directamente en ComfyUI. [0]
   2. Esto elimina la necesidad de dependencias o scripts de instalación. [1]
   3. Los usuarios solo necesitan actualizar ComfyUI y añadir los modelos. [1]
2. Requisitos de VRAM [1]
   1. Los modelos pueden ejecutarse con tan solo 6 GB de VRAM. [1]
   2. Esto es posible gracias a que el desarrollador Kijai reconstruyó el código del modelo y la cadena de posprocesamiento en PyTorch puro. [10]
   3. La reconstrucción eliminó las dependencias adicionales, como las herramientas de compilación de CUDA, lo que también significa que ya no es exclusivo de Nvidia. [9]

1.2. Configuración de ComfyUI y descarga de modelos [16]

1. Actualización de ComfyUI [17]
   1. Es crucial actualizar ComfyUI a la última versión de GitHub. [19]
   2. Para la versión de escritorio, se debe seleccionar "latest on GitHub current" en la ventana de actualización. [22]
   3. Para la versión portátil, se debe ejecutar el archivo update comfyui.bat. [26]
2. Descarga y ubicación de modelos [27]
   1. Los modelos necesarios se pueden descargar desde Hugging Face, Comfy Org y Pixel 3D, así como para Trellis 2. [37]
   2. Los archivos principales incluyen modelos de visión de clip, modelos de difusión y archivos VAE. [39]
   3. Los modelos deben guardarse en la carpeta models dentro de la instalación de ComfyUI, en subcarpetas específicas como diffusion models. [41]
   4. Después de descargar todos los modelos, se debe reiniciar ComfyUI o actualizarlo (presionando "R") para que los nodos rojos desaparezcan y los modelos estén disponibles. [47]

1.3. Ejecución de flujos de trabajo y optimización de resultados [47]

1. Ejecución del flujo de trabajo de PixArt 3D [50]
   1. Se recomienda usar el archivo PixArt 3D int8 ComfyUI safe tensor para VRAM baja (6-8 GB). [52]
   2. Después de seleccionar el modelo, se puede ejecutar el flujo de trabajo, por ejemplo, con una cabeza de dragón y la opción "remove background" activada. [54]
   3. El resultado incluye una malla voxelizada, generación de forma, malla con vista previa de color de vértice y el resultado final. [57]
   4. El modelo int8 tardó 282 segundos, mientras que el modelo completo (BF16.safetensors) tardó 245 segundos, aunque la diferencia puede deberse a que el modelo ya estaba cargado. [64]
2. Ejecución del flujo de trabajo de Trellis 2 [68]
   1. El flujo de trabajo de Trellis 2 tiene una estructura de nodos similar a la de PixArt 3D, pero utiliza el modelo y el nodo de condicionamiento de Trellis 2. [71]
   2. La generación con Trellis 2 fue más rápida, tardando 186 segundos en el ejemplo. [80]
   3. Para personajes, se recomienda dividirlos en partes para modificar las texturas faciales. [77]
3. Mejora de la calidad y configuración [82]
   1. Aumentar los pasos de 12 a 30-50 mejora la calidad, aunque 30 es suficiente para VRAM limitada. [83]
   2. La resolución se puede aumentar a 64 para mejores resultados. [86]
   3. La etapa de sobremuestreo permite resoluciones más altas, hasta 2K. [89]
   4. El tamaño de la textura se puede ajustar, siendo 4K el predeterminado. [91]
   5. Los modos de desenvolvimiento UV incluyen "adaptive" (adaptativo) y "PEC" (que distribuye uniformemente). [95]
   6. Se pueden exportar mapas como el de color, rugosidad metálica, normal y oclusión ambiental. [99]
   7. La decimación de la malla permite reducir el número de caras, por ejemplo, de 700.000 a 300.000, para optimizar el modelo. [102]
   8. Trellis 2 tiende a dar un buen resultado general, mientras que PixArt 3D ofrece más precisión. [109]

1.4. Limitaciones y consejos para el flujo de trabajo [111]

1. Limitaciones actuales [111]
   1. No hay soporte para vista múltiple nativa. [112]
   2. El desenvolvimiento UV puede causar picos de VRAM en tarjetas pequeñas al usar 4K. [114]
2. Consejos para el flujo de trabajo [116]
   1. Descargar modelos y caché de ejecución: Si el PC se ralentiza o se queda sin VRAM, se puede ir al símbolo de ComfyUI, hacer clic en "edit" y luego en "unload models and execution cache" para liberar VRAM. [117]
   2. Guardar la malla: Aunque el nodo "save 3D model" debería guardar el modelo en la carpeta de salida, si no funciona, se puede usar el botón de exportación en la parte inferior derecha para guardar la malla como un archivo GLB. [119]
   3. Desactivar el horneado de texturas: Si solo se necesita la malla y no las texturas, se puede desactivar el horneado de texturas para ahorrar tiempo de generación. [127]