ComfyUI Depth T2I 어댑터 사용 예시

​

T2I 어댑터 소개

​

T2I 어댑터와 ControlNet 비교

1. 경량 설계: T2I 어댑터는 파라미터 수가 적고 메모리 사용량이 더 작습니다.
2. 추론 속도: T2I 어댑터는 일반적으로 ControlNet보다 약 3배 빠릅니다.
3. 제어 정밀도: 특정 상황에서는 ControlNet이 더 정밀한 제어를 제공하며, T2I 어댑터는 경량 제어에 더 적합합니다.
4. 다중 조건 조합: T2I 어댑터는 여러 조건을 결합할 때 자원 효율성이 더욱 두드러집니다.

​

T2I 어댑터의 주요 유형

• 깊이: 이미지의 공간적 구조와 깊이 관계를 제어합니다.
• 선화(Canny/Sketch): 이미지의 가장자리와 선을 제어합니다.
• 키포즈: 캐릭터의 자세와 동작을 제어합니다.
• 세그멘테이션(Seg): 시맨틱 세그멘테이션을 통해 장면 레이아웃을 제어합니다.
• 컬러: 이미지의 전체적인 색감을 제어합니다.

​

깊이 T2I 어댑터 응용의 가치

1. 공간 레이아웃 제어: 3차원 공간 구조를 정확히 묘사해 인테리어 디자인 및 건축 시각화에 적합합니다.
2. 객체 위치 제어: 장면 내 객체의 상대적 위치와 크기를 제어해 제품 쇼케이스 및 장면 구성에 적합합니다.
3. 원근 관계 유지: 합리적인 원근과 비율을 유지해 풍경 및 도시 장면 생성에 적합합니다.
4. 빛과 그림자 레이아웃: 깊이 정보를 기반으로 자연스러운 빛과 그림자의 분포를 구현해 사실성을 높입니다.

​

ComfyUI 깊이 T2I 어댑터 워크플로 예시 설명

​

1. 깊이 T2I 어댑터 워크플로 에셋

​

2. 모델 설치

• interiordesignsuperm_v2.safetensors
• t2iadapter_depth_sd15v2.pth

ComfyUI/
├── models/
│   ├── checkpoints/
│   │   └── interiordesignsuperm_v2.safetensors
│   └── controlnet/
│       └── t2iadapter_depth_sd15v2.pth

​

3. 단계별 워크플로 실행

1. Load Checkpoint가 interiordesignsuperm_v2.safetensors를 로드할 수 있는지 확인하세요.
2. Load ControlNet가 t2iadapter_depth_sd15v2.pth를 로드할 수 있는지 확인하세요.
3. Load Image 노드에서 Upload를 클릭해 앞서 제공한 입력 이미지를 업로드하세요.
4. Queue 버튼을 클릭하거나 단축키 Ctrl(cmd) + Enter를 사용해 이미지 생성을 실행하세요.

​

T2I 어댑터 사용 시 일반적인 팁

​

입력 이미지 품질 최적화

1. 적당한 대비: 제어 이미지(예: 깊이 맵, 선화)는 명확한 대비를 갖되 지나치게 극단적이지 않아야 합니다.
2. 명확한 경계: 주요 구조와 요소 경계가 제어 이미지에서 확실히 구분될 수 있도록 해야 합니다.
3. 노이즈 제어: 특히 깊이 맵과 선화의 경우 제어 이미지에 과도한 노이즈가 없도록 노력하세요.
4. 합리적인 레이아웃: 제어 이미지는 합리적인 공간 레이아웃과 요소 분포를 가져야 합니다.

​

T2I 어댑터 사용의 특징

1. 깊이 + 에지: 공간 레이아웃을 제어하면서 명확한 구조적 경계를 유지해 건축 및 인테리어 디자인에 적합합니다.
2. 선화 + 컬러: 형태를 제어하면서 색상 계획을 지정해 캐릭터 디자인 및 일러스트레이션에 적합합니다.
3. 포즈 + 세그멘테이션: 캐릭터의 동작을 제어하면서 장면 영역을 정의해 복잡한 서사적 장면에 적합합니다.