1. ComfyUI Trellis 2 최신 업데이트 소개 및 설치 [0]

thumbnail

ComfyUI Trellis 2의 최신 업데이트는 구멍 없는 3D 메시 생성, 세부 묘사 개선, 텍스처 최적화를 가능하게 하며, 낮은 VRAM 환경에서도 고품질 로우 폴리 캐릭터를 무료로 생성할 수 있다.

1.1. Trellis 2 업데이트의 주요 개선 사항 [0]

  1. 구멍 없는 3D 메시 생성: 새로운 노드 구현으로 기존 Trellis 2의 가장 큰 문제였던 메시의 구멍 문제를 해결한다. [0]
  2. 외부 리파이너 불필요: Ultra Shape와 같은 외부 리파이너 없이도 Trellis 2에서 직접 메시를 생성할 수 있다. [6]
  3. 세부 묘사 및 텍스처 최적화: 더 많은 디테일과 최적화된 텍스처를 제공한다. [0]

1.2. ComfyUI Trellis 2 설치 및 업데이트 방법 [7]

  1. Comfy UI Easy Install 패키지 사용: 이전 영상에서 소개된 Comfy UI Easy Install 패키지를 활용한다. [7]
  2. 업데이트 과정:
    1. update easy install.bat 파일을 더블 클릭하여 업데이트를 완료한다. [9]
    2. add-ons 폴더로 이동하여 Trellis to 2.8.bat을 실행한다. [10]
    3. start Comfy를 클릭하여 ComfyUI를 실행한다. [10]
  3. "alert error loading model" 메시지 처리:
    1. 이 메시지는 오류가 아니므로 무시해도 된다. [12]
    2. 새 워크플로우를 열 때 Comfy가 모델을 즉시 찾으면 나타나는 정상적인 메시지이다. [14]

2. Trellis 2 고품질 워크플로우 [19]

thumbnail

Trellis 2 고품질 워크플로우는 구멍 없는 상세한 3D 모델을 생성하며, 특정 버그 발생 시 재시작이 필요하고, 더 높은 디테일을 위해 설정을 조정할 수 있지만, 생성된 모델의 토폴로지는 여전히 개선이 필요하다.

2.1. 고품질 워크플로우 개요 및 실행 [19]

  1. 워크플로우 개발: Visual Bruno가 주로 개발한 Trellis 2 High Quality 워크플로우를 사용한다. [19]
  2. 워크플로우 로드: Trellis 2 High Quality.json 파일을 ComfyUI로 드래그하여 로드한다. [21]
  3. 워크플로우 구성:
    1. 이름 및 이미지 업로드: 모델의 이름을 지정하고 이미지를 업로드하는 섹션이다. [25]
    2. 메시 생성: 3D 메시를 생성하는 섹션이다. [26]
    3. 리파이너: 지오메트리를 추가로 개선하는 섹션이다. [27]
    4. 텍스처링: 텍스처를 적용하는 섹션이다. [28]
  4. VRAM 요구 사항: 이 워크플로우는 처음 실행 시 약 14GB의 VRAM을 필요로 한다. [29]
  5. 워크플로우 실행: 이미지를 업로드한 후 'Run' 버튼을 클릭하여 워크플로우를 실행한다. [31]

2.2. 고품질 워크플로우 결과 및 특징 [35]

  1. 구멍 없는 메시: 이 워크플로우는 더 이상 메시에서 구멍이 발생하지 않는다. [36]
  2. 외부 리파이너 불필요: Ultra Shape나 Fave와 같은 외부 리파이너가 필요 없다. [37]
  3. 'fill holes with mesh lip' 노드: 새로운 노드인 'fill holes with mesh lip'이 구멍을 채우는 역할을 한다. [39]
  4. 상세한 텍스처: 꽤 상세한 텍스처 결과를 얻을 수 있다. [43]
  5. 텍스처 개선 권장: 더 가까이 확대하면 일부 부분이 정의되지 않아 개선이 필요할 수 있으며, modif.com을 사용하여 텍스처를 재작업하는 것을 권장한다. [44]

2.3. 고품질 워크플로우 문제 해결 및 고급 설정 [48]

  1. 수직선 버그 (Vertical Lines Bug):
    1. 때때로 수직선 버그가 발생할 수 있다. [48]
    2. 유일한 해결책은 ComfyUI를 다시 시작하고 인내심을 가지고 기다리는 것이다. [49]
    3. 이 문제는 향후 업데이트에서 수정될 예정이다. [51]
  2. 고급 설정을 통한 디테일 향상:
    1. Step Size 증가: 현재 12로 설정된 스텝 사이즈를 50과 같이 높여 모델의 디테일을 증가시킬 수 있다. [61]
    2. Sparse Structure Resolution: 이 값은 32로 유지하는 것이 좋다. [66]
    3. 고해상도 설정: GPU가 허용하는 경우 더 높은 해상도를 선택할 수 있다. [67]
    4. Refiner Shape Steps 증가: 리파이너의 Shape Steps를 증가시킨다. [68]
    5. 텍스처링 설정: 텍스처링 스텝을 50으로 늘리고, 최상의 결과를 위해 텍스처 크기를 4K로 설정한다. [70]
  3. 생성 시간 및 VRAM:
    1. 기본 설정으로 로봇 모델 생성 시 약 514초(8분 30초)가 소요된다. [55]
    2. 고급 설정 적용 시 약 21분이 소요될 수 있으며, 이는 ComfyUI를 재설정하거나 모델을 언로드하여 VRAM을 비우면 단축될 수 있다. [78]
    3. 생성 시간은 모델의 복잡도에 따라 달라진다. [56]
    4. RTX 5080 (16GB VRAM)을 사용하지만, 다음 섹션에서 소개할 워크플로우는 더 적은 VRAM을 필요로 한다. [58]
  4. 다양한 모델 예시: 고품질 워크플로우로 생성된 다양한 모델 예시를 확인할 수 있다. [82]

2.4. 모델 토폴로지 및 리토폴로지 [85]

  1. 삼각형 하이 폴리 토폴로지: Blender에서 모델을 로드하면 삼각형 형태의 하이 폴리 토폴로지를 확인할 수 있으며, 이는 개선이 필요하다. [87]
  2. 리토폴로지 필요성: 게임 개발 등에 활용하기 위해서는 리토폴로지 작업이 필수적이다. [86]
  3. 리토폴로지 방법: Hanuan 3D와 같은 도구를 사용하여 고해상도 모델을 로우 폴리 모델로 리토폴로지하는 방법을 참고할 수 있다. [89]
  4. ComfyUI 내 리토폴로지 연구: ComfyUI 내에서 새로운 리토폴로지 방법을 찾고 있으며, 아는 방법이 있다면 공유를 요청한다. [91]
  5. 모델의 용도: 현재 Trellis 2 모델은 고해상도 스카이프/캐릭터 또는 기본적인 토폴로지가 필요한 캐릭터에 더 적합하다. [93]

3. Trellis 2 로우 폴리 및 저VRAM 워크플로우 [94]

thumbnail

Trellis 2는 게임 개발에 적합한 로우 폴리 모델을 생성하며, 저VRAM 워크플로우를 통해 낮은 사양에서도 고품질 모델을 만들 수 있고, 다양한 리메시 옵션을 제공하여 VRAM 사용량과 모델 품질을 조절할 수 있다.

3.1. 로우 폴리 워크플로우 [94]

  1. 로우 폴리 모델 생성: 모바일 게임, 일반 게임, 배경 소품 등에 사용할 수 있는 로우 폴리 모델을 생성한다. [95]
  2. 적은 면 수 사용: 매우 적은 면 수를 사용하여 모델을 생성한다. [96]
  3. 'Trellis to smooth normals' 노드: 이 노드를 사용하여 텍스처를 부드럽게 처리한다. [98]
  4. 결과 예시: 5,000개의 면 수로 생성된 모델은 멀리서 보기에 훌륭하며, 텍스처가 부드럽게 처리된다. [101]

3.2. 저VRAM 워크플로우 [107]

  1. 고품질 워크플로우 기반: 저VRAM 워크플로우는 고품질 워크플로우를 기반으로 노드와 설정을 조정한 버전이다. [108]
  2. 해상도 및 파이프라인 유형 조정: 해상도와 파이프라인 유형을 512로 설정해도 좋은 결과를 얻을 수 있다. [109]
  3. 새로운 리메시 노드:
    1. Trellis to Remesh: 이 노드는 약간 더 많은 VRAM을 사용한다. [111]
    2. Trellis to Remesh with Quad: 이 노드는 일반 Trellis to Remesh보다 적은 VRAM을 사용하므로 활성화하는 것을 권장한다. [112]
  4. 메시 리파이너 설정: 메시 리파이너에서도 해상도를 512로 설정하고, Remesh with Quad 방식을 사용한다. [116]
  5. 텍스처링 해상도 및 크기:
    1. 기본 설정으로도 작동하지만, VRAM 부족 시 해상도와 텍스처 크기를 24, 48과 같은 낮은 값으로 줄여야 한다. [119]
  6. VRAM 사용량: 이 워크플로우는 올바른 설정 시 약 8~10GB의 VRAM을 사용하며, 입력 이미지의 디테일에 따라 8GB만 사용할 수도 있다. [123]
  7. 결과 확인: 워크플로우 실행 후 캐릭터의 결과와 노멀 맵을 확인할 수 있다. [126]

3.3. 리메시 방법 비교 [131]

  1. Remesh Quad 방식:
    1. 표면이 약간 더 부드럽지만, 더 빠르고 적은 VRAM을 사용한다. [133]
  2. 일반 Remesh 방식:
    1. 전반적으로 더 부드러운 형태를 제공하지만, 약간 더 느리고 더 많은 VRAM을 필요로 한다. [134]

4. Blender를 이용한 모델 후처리 및 추가 워크플로우 [136]

thumbnail

Blender를 사용하여 Trellis 2 모델의 면 처리 문제와 텍스처의 어두운 줄무늬를 쉽게 수정할 수 있으며, 여러 모델을 한 번에 생성하고 해상도를 조절하는 배치 처리 워크플로우와 여러 캐릭터나 소품을 병합하는 멀티뷰 워크플로우도 제공한다.

4.1. Blender에서 면 처리(Faceted Look) 문제 해결 [136]

  1. 문제점: Trellis 2 모델에서 때때로 발생하는 면 처리된(faceted) 모양을 수정해야 한다. [136]
  2. ComfyUI 내 해결책 개발 중: ComfyUI 내에서 이 문제를 직접 해결하기 위한 솔루션이 개발 중이지만, 현재는 Blender를 사용해야 한다. [138]
  3. Blender 수정 과정 (1~2분 소요):
    1. 모델 불러오기: 모델을 Blender로 임포트한다. [142]
    2. 정점 병합 (Merge Vertices):
      1. 모델을 선택하고 Tab 키를 눌러 Edit Mode로 전환한다. [143]
      2. 모든 정점이 선택되어 있지 않다면 A 키를 눌러 모두 선택한다. [144]
      3. M 키를 누르고 "by distance"를 선택하여 연결되지 않은 모든 정점을 병합한다. (GV 파일에서 발생할 수 있는 문제 해결) [146]
    3. 부드럽게 만들기 (Smooth Out):
      1. Tab 키를 눌러 Object Mode로 돌아간다. [148]
      2. Sculpt Mode로 이동한다. [149]
      3. "unified strength"를 사용하고 값을 0.2 정도로 낮춘다. [150]
      4. Shift 키를 누른 채 마우스 왼쪽 버튼을 클릭하여 모델의 면 처리된 부분을 부드럽게 만든다. [152]
    4. 결과: 이 과정을 통해 모델의 디테일을 유지하면서 면 처리된 모양을 제거하고 깨끗한 캐릭터를 얻을 수 있다. [156]
    5. 텍스처 유지: 이 과정 후에도 텍스처 왜곡 없이 텍스처가 그대로 유지된다. [160]

4.2. 텍스처의 어두운 줄무늬(Dark Streaks) 문제 해결 [162]

  1. 문제점: 텍스처에 어두운 줄무늬가 나타날 수 있으며, 이는 너무 많은 정점으로 인해 UV가 손상되기 때문이다. [162]
  2. 해결 방법:
    1. 면 수를 500,000과 같이 줄여서 워크플로우를 다시 실행한다. [164]
    2. 이렇게 하면 어두운 줄무늬가 훨씬 줄어들고 텍스처 문제가 해결된다. [167]
  3. 생성 시간: 이 워크플로우는 텍스처링 스텝과 리파이너를 포함하여 약 178초가 소요된다. [170]

4.3. 배치 단순화 및 내보내기 워크플로우 [172]

  1. 'Trellis to batch simplify mesh and export' 노드: 이 새로운 노드를 사용하여 여러 모델을 한 번에 생성할 수 있다. [172]
  2. 다양한 해상도 생성: 2백만 면에서 1천 면까지 다양한 해상도의 모델을 생성하여 최적의 설정을 찾을 수 있다. [174]
  3. 워크플로우 실행: 모델에 이름을 지정한 후 워크플로우를 실행한다. [177]
  4. 결과 확인:
    1. ComfyUI에서는 3D 미리보기가 나타나지 않지만, 모든 모델은 출력 폴더에 저장된다. [180]
    2. Blender에서 .GAB 파일을 임포트하여 출력 폴더의 모든 모델을 한 번에 불러와 비교할 수 있다. [183]
    3. Blender의 통계에서 각 모델의 면 수를 확인하며 디테일 변화를 볼 수 있다. [187]

4.4. 멀티뷰 워크플로우 (캐릭터 및 소품 병합) [189]

  1. 목적: 여러 캐릭터나 소품을 병합하는 워크플로우이다. [189]
  2. 'image batch multi' 노드: 이 노드를 사용하여 이미지를 병합한다. [192]
  3. 입력 크기 조정: 입력 크기를 3 또는 4 등으로 업데이트하여 더 많은 입력을 추가할 수 있다. [193]
  4. 워크플로우 실행: 워크플로우를 실행하여 결과를 확인한다. [195]
  5. 결과 및 조정 필요성:
    1. 완벽하게 작동하지 않을 수 있으며, 예를 들어 날개가 캐릭터에 제대로 부착되지 않을 수 있다. [198]
    2. 이미지 조정이나 시드(seed) 값을 무작위화하여 다른 결과를 시도해 볼 수 있다. [199]
  6. Blender를 이용한 후처리:
    1. 모델 임포트: 생성된 파일을 Blender로 임포트한다. [204]
    2. 정점 병합: Tab 키를 눌러 Edit Mode로 전환한 후, 마우스 오른쪽 버튼을 클릭하고 "merge vertices by distance"를 선택하여 느슨한 정점을 병합한다. (Trellis 2 파일 작업 시 유용한 팁) [206]
    3. 느슨한 부분 분리: 다시 Edit Mode로 이동하여 Mesh -> Separate -> "by loose parts"를 선택하면 날개와 몸통처럼 느슨한 부분을 분리할 수 있다. [209]
    4. 위치 조정: 분리된 날개 등을 전면 보기(넘패드 1)에서 원하는 위치로 재배치할 수 있다. [212]
  7. 얼굴 텍스처링의 한계: Trellis 2의 텍스처링은 얼굴 디테일에서 여전히 약점을 보인다. [215]
  8. Modif 사용 권장: 더 나은 얼굴 텍스처를 위해 Modif 사용을 권장한다. [217]
  9. 워크플로우 다운로드: 모든 워크플로우는 무료로 다운로드할 수 있다. [219]