인페인팅 모델은 인페인팅을 위해 특별히 설계된 모델입니다. 모델 아키텍처가 표준 모델과 다릅니다. 아래에서 인페인팅 모델이 포함된 ComfyUI 인페인트 워크플로우를 다운로드할 수 있습니다.작동 방식 이 워크플로에서는 VAE Enocde(for inpainting) 노드를 사용하여 인페인트 마스크를 latent_image에 부착합니다. Step 1 : checkpoint model 로드 및 선택Load checkpoint node에 원하는 모델을 선택합니다.오늘 사용할 모델은 majicmixRealitic 입니다. 이전 스테이블 디퓨전 실사 이미지 맞춤 체크포인트 모델 top3 추천 글에서 추천드린 모델 중 하나입니다. Step 2 : Inpaint 적용할 이미지 업로드수정을 원하는 이미지를 Load..
스테이블 디퓨전에서 체크포인트 모델(Checkpoint model)을 사용하는 이유안녕하세요, SDmaster입니다. 스테이블 디퓨전으로 2D,반실사2D, 3D, 실사 이미지 등 다양한 이미지를 생성할 수 있지만 기본 모델로는 원하는 이미지를 만들기엔 분명히 한계가 있습니다. 스테이블 디퓨전이 사람의 몸으로 쳤을 때 뇌라면 그걸 그려주는 역할을 해주는 몸이 checkpoint model이라고 보시면 되겠습니다.원하는 이미지를 만들기 위해서는 이렇게 많은 이미지 데이터를 학습시켜 나만의 체크 포인트 모델을 만들어 원하는 느낌을 살려주는 이미지를 뽑을 수 있습니다.하지만 이렇게 학습된 모델을 이용할 땐 약간의 주의할 점이 있습니다.바로 모델마다 알맞은 파라미터가 존재한다는 겁니다. 그래서 모델을 다운받으실 ..
안녕하세요 SDmaster입니다. 오늘 포스팅은 스테이블 디퓨전(Stable diffusion)을 사용하기 위한 GUI중 요즘 가장 핫하게 떠오르고 있는 ComfyUI의 설치방법에 대해 알아보겠습니다.스테이블 디퓨전의 대표적인 GUI에는 Automactic1111과 ComfyUI가 있습니다.아마 스테이블 디퓨전을 Automatic1111로 접하시는 분들이 대부분일거라고 생각합니다.하지만 ComfyUI도 충분히 매력적이며 추후 제가 왜 ComfyUI를 선택했는지 다뤄보겠습니다. 그럼 이제 설치방법에 대해 알아보시죠.1.설치방법설치방법은 총 3단계로 이루어집니다. 그리고 포터블 프로그램이므로 압축만 푼다면 바로 사용이 가능합니다.1. https://github.com/comfyanonymous/ComfyUI..
Stable Diffusion을 사용하거나 공부하다 보면 LoRA라는 단어를 익히 들어보셨을거라고 생각합니다. 스테이블 디퓨전 숙련자들은 LoRA를 통해 자신이 원하는 이미지로 수정하고 있습니다.그렇다면 도대체 LoRA라는 무엇일까요?오늘은 이 LoRA라는 것이 무엇인지 그리고 어떻게 작동하는지에 대해 알아보겠습니다. 1. LoRA기본 원리LoRA는 Low-Rank Adaptation의 약자로 U-Net같은 거대한 언어 모델(LLM)을 미세 조정하기 위해 탄생한 기술입니다.스테이블 디퓨전의 기본 원리 설명글에서 전체 이미지 생성 과정이 노이즈 제거를 역순으로 하는 것과 같다고 말씀드렸는데, 그 때 자세히 설명하지 않은 것이 바로 '노이즈 예측기'입니다:노이즈 예측기는 어떻게 작동할까요? 간단히 말해서 ..