StableDiffusion 3 기본 모델은 월 이용료를 지불해야만 사용가능한 모델인 반면 스테이블 디퓨전3 Medium은 허깅페이스에서 간단한 정보만 입력한다면 누구나 다운받아 이용할 수 있습니다.StableDiffusion 3 종류그럼 현재 이용료를 지불하고 사용해야하는 모델과 차이는 뭘까요?스테이블 디퓨전 3는 세가지 버전으로 나눠서 제공하고 있습니다. 각각의 차이는 매개변수와 추론시간이 다릅니다.StableDiffusion 3 Medium : 약 20억개의 매개변수를 가진 모델StableDiffusion 3 Large : 약 80억개의 매개변수를 가진 모델StableDiffusion 3 Large Turbo : StableDiffusion 3 Large 모델과 동일하지만 추론 시간이 더 빠름Sta..

안녕하세요, SDmaster입니다. Stable Diffusion으로 이미지의 배경을 만들때 원본이 뭉게지거나 멋대로 바뀌는 현상을 많이 경험해보셨을거라고 생각합니다. 저 또한 이미지 내에서 특정 부분은 살리고 나머지 부분만 바꾸고 싶을 때가 더 많았던 것 같습니다. 그래서 이번 포스팅에서는 원본에서 내가 원하는 부분을 유지한 채로 배경만 바꾸는 워크플로우를 뜯어보려고 합니다.우선 이번 워크플로우에 사용된 중요 노드들을 먼저 간단하게 설명하고 들어가겠습니다.사용된 기능 및 노드Pixel Spread : 이미지의 마스크된 가장 자리에 픽셀을 확장시켜 이미지 합성을 자연스럽게 도와줍니다. RmBgUltra : 배경 제거 기능을 해주는 노드 입니다.ControlNet - Depth : 이미지의 깊이를 측정합니..

안녕하세요 SDmaster 입니다. 여러분들은 사진의 퀄리티를 구분할 때 어떤 점을 기준으로 삼고계신가요?기준으로는 화소 그 자체일 수도 있고 구도, 초점, 배경 등 여러 기준이 있을 수 있습니다.하지만 개인적으로 저는 어떤 컨셉의 사진이든 첫번째 기준은 '빛'이라고 생각합니다. 아무리 좋은 화소와 구도, 배경을 가지고 있어도 적절한 빛이 없다면 무용지물이 됩니다.오늘은 이러한 이미지의 '빛'을 재구성 해주는 기능에 대해 소개해볼려고합니다.ComfyUI-IC-Light스테이블 디퓨전 이미지 생성 과정에서 특정 영역만 편집을 한뒤 수정된 잠재 이미지를 디코딩하는 방식으로 진행 되게 해주는 일종의 도구(tool)라고 보시면 됩니다.여기서 IC-Light라는 조명에 특화된 훈련을 통해 만들어진 모델을 이용해 ..

안녕하세요, SDmaster 입니다. 이번 포스팅은 A1111에서는 'Clip skip', ComfyUI에서는 'CLIP Set Last Layer'라고부르는 이 기능이 도대체 무엇이고 어떤 역할을 하는지 알아보겠습니다.(아래 내용에선 Clip skip = CLIP Set Last Layer로 보시면 될 것 같습니다.)Clip skip이란Clip skip은 말 그대로 이미지 생성 과정의 일부를 건너뛰는 기능입니다. 즉 이미지 렌더링 속도도 빨라지는 효과가 있죠.그렇다면 이 과정의 일부를 건너뛰는 이유는 무엇일까요?일반적인 Stable Diffusion 1.5 기본 모델 이미지는 12개의 "Clip Layer"를 거치는데, 이는 세분화 수준과 같습니다.초기 단계는 매우 광범위하지만, 이후 단계로 갈수록 이..

안녕하세요, SDmaster입니다.여전히 체크포인트 모델을 그대로 사용하시나요? FreeU기능으로 이제 더 세밀하게 조정해 이미지 퀄리티를 높혀보세요.오늘 소개드릴 node이자 addon인 FreeU를 이용하면 체크포인트 모델을 세밀하게 조정해서 보다 높은 퀄리티 이미지를 만들어낼 수 있습니다.FreeU란 무엇인가?Chenyang Si의 연구진들은 U-net 모델의 효과가 두 부분으로 나눠진다는 것을 발견했습니다.backbone layer를 통한 신호 전달로 전반적인 이미지를 제어스킵 연결을 통한 신호 전달로 이미지의 디테일을 추가이렇게 두가지로 나뉜 진행 방식 사이에 FreeU 기능을 통해 각각 효과들을 제어하는 방법을 제시한겁니다.▶FreeU 발표 원문 링크◀스케일링 계수 b로 신호를 향상시키면 이미..