피파 한 줄 정리: 이미지-투-이미지의 핵심 손잡이는 디노이징 강도야. 0.2는 미세 조정, 0.5는 뚜렷한 변환, 0.9는 거의 새 생성에 가까워.
머릿속 모형: 사진 위에 트레이싱지를 올리고 새로 그린다고 생각해 봐. 아래 사진은 위치, 비율, 구도를 제공하고 위의 선은 새로운 화풍, 색, 질감을 만든다. 이미지-투-이미지도 입력 이미지를 구조적 바탕으로 삼고 텍스트 프롬프트의 방향으로 다시 해석한다.
무작위 노이즈 대신 입력 이미지에서 시작하기
텍스트-투-이미지는 순수한 무작위 노이즈에서 시작하지만, 이미지-투-이미지는 입력에 통제된 양의 노이즈를 더한 뒤 프롬프트에 맞춰 제거한다. 적게 흐트러뜨리면 원본을 많이 보존하고, 많이 흐트러뜨리면 모델의 재해석 폭이 커진다.
입력 이미지 통제된 양의 노이즈 추가 프롬프트로 노이즈 제거
┌──────────┐ ┌──────────────────────┐ ┌──────────────────┐
│ 원본 사진 │ ──→ │ 구조가 일부 남은 │ ──→ │ 원래 배치와 새로운 │
│ │ │ 부분 노이즈 이미지 │ │ 스타일을 가진 결과 │
└──────────┘ └──────────────────────┘ └──────────────────┘
▲
디노이징 강도
낮음(0.2) = 작은 변화
높음(0.8) = 큰 변화
디노이징 강도 읽기
- 0.1–0.3, 낮음: 색조 이동, 약한 질감 변화, 작은 보정처럼 원본을 알아볼 수 있는 미세 조정.
- 0.4–0.6, 중간: 화풍 전환, 계절이나 시간대 변경처럼 구조는 남고 세부는 크게 바뀌는 변환.
- 0.7–0.9, 높음: 원본은 느슨한 영감만 제공하고 내용까지 크게 달라질 수 있는 재구상.
- 1.0: 입력이 완전히 노이즈가 되어 자유롭게 만드는 텍스트-투-이미지와 같다.
플랫폼에 따라 이 손잡이를 창의성이나 변환 정도라고 부르기도 하지만, 질문은 늘 같아. “원본을 얼마나 지키고 모델에게 얼마나 다시 그리게 할 것인가?”
주요 활용법
- 스타일 변환: 사진을 유화로, 스케치를 완성 삽화로, 사실화를 애니메이션풍으로 바꾼다.
- 개념 변주: 같은 방을 다른 스타일로 재해석한다.
- 거친 초안에서 완성본으로: 손그림이나 블록 배치에 세부와 마감을 더한다.
- 계절과 시간 변화: 여름을 겨울로, 낮을 밤으로 바꾼다.
- 팔레트 변화: 구도는 유지하며 따뜻한 색을 차가운 색으로 옮긴다.
❌ 텍스트만 사용
“겨울의 아늑한 오두막, 수채화” → 내 오두막이 아닌 평범한 결과
✅ 이미지-투-이미지 사용
실제 오두막 사진 + “수채화, 눈 내린 겨울, 창문의 따뜻한 빛” + 강도 0.5 → 내 오두막의 구조를 가진 겨울 수채화
핵심 정리
- 입력 이미지의 구조를 바탕으로 새로운 스타일과 세부를 입힌다.
- 강도가 낮으면 작은 변화, 높으면 큰 재구상이 일어난다.
- 스타일 변환, 개념 변주, 초안 마감, 환경 변화에 유용하다.
- 결과를 다시 입력하며 점진적으로 다듬는 반복은 실전의 핵심 작업 방식이다.