ComfyUI FreeU 기능을 이용하면 이미지 퀄리티가 달라집니다

안녕하세요, SDmaster입니다.여전히 체크포인트 모델을 그대로 사용하시나요? FreeU기능으로 이제 더 세밀하게 조정해 이미지 퀄리티를 높혀보세요.

오늘 소개드릴 node이자 addon인 FreeU를 이용하면 체크포인트 모델을 세밀하게 조정해서 보다 높은 퀄리티 이미지를 만들어낼 수 있습니다.

FreeU란 무엇인가?

Chenyang Si의 연구진들은 U-net 모델의 효과가 두 부분으로 나눠진다는 것을 발견했습니다.

1. backbone layer를 통한 신호 전달로 전반적인 이미지를 제어
2. 스킵 연결을 통한 신호 전달로 이미지의 디테일을 추가

이렇게 두가지로 나뉜 진행 방식 사이에 FreeU 기능을 통해 각각 효과들을 제어하는 방법을 제시한겁니다.

▶FreeU 발표 원문 링크◀

FreeU 기본 원리

<FreeU 기능에 대한 전문가 설명>
스케일링 계수 b로 신호를 향상시키면 이미지 품질이 향상되지만 이미지가 지나치게 부드러워질 수 있습니다.
따라서 스킵 연결의 신호 전파를 제어하기 위해 추가적인 스케일링 계수 s가 도입되었습니다. 이는 스킵 연결의 저주파수 기여도를 억제하여 전체 컴포지션에 미치는 영향을 줄입니다.

FreeU의 기본 매개변수는 백본 기능을 강화하고(s > 1) 스킵 연결 기능의 스킵 저주파 성분을 억제합니다(b < 1)

 

위 내용을 간단히 요약하자면 앞서 말한데로 계수 b는 전체 이미지에 영향을 미치고 s는 외적인 디테일을 제어한다고 보시면 됩니다. 

ComfyUI에서 사용해보기

ComfyUI에서 FreeU를 사용하는 방법은 간단합니다. Load Checkpoint와 KSampler 노드 사이에 FreeU 또는 FreeU_v2 커스텀 노드를 삽입하기만 하면 됩니다.

FreeU 연결 예시

참고 하실 사항은 계수의 수치입니다. 모델 버전에 따라 추천하는 수치가 다르니 참고해주시면 되겠습니다.

추천 수치

Stable Diffusion v1.4

B1: 1.3, B2: 1.4

S1: 0.9, s2: 0.2 

Stable Diffusion  v1.5

B1: 1.5, B2: 1.6

S1: 0.9, s2: 0.2 

Stable Diffusion  v2.1

B1: 1.4, B2: 1.6

S1: 0.9, s2: 0.2

Stable Diffusion SDXL 

B1: 1.3, B2: 1.4

S1: 0.9, s2: 0.2

FreeU 적용 비교사진

1. 비적용 2. 적용