본문에서는 컨트롤넷 타일 및 Ultimate SD Upscale을 활용하여 가장 편리하면서도 괜찮은 품질을 얻을 수 있는 SDXL 업스케일 방식에 대해 살펴보도록 하겠습니다. SD1.5와 달리 SDXL은 기본 해상도가 높기 때문에, 결과 이미지를 업스케일하는 것 또한 많은 컴퓨팅 파워를 요구합니다. 업스케일을 한 번 진행하는 것만으로도 시간이 꽤 걸리기 때문에, 오늘 소개드리는 간편하면서도 일정수준 이상의 품질이 보장되는 방식을 사용해보시기 … Read more
ResAdapter는 이름 그대로 해상도(Resolution)를 적절한 값으로 적용(Adapter)해주는 역할을 합니다. 본문에서는 ComfyUI에서 SD1.5 체크포인트 모델을 이용해 SDXL 해상도의 이미지를 생성해보고, 적용 전의 이미지와 비교해보겠습니다. ResAdapter의 필요성 1024×1024 해상도 기반의 SDXL 모델이 처음 등장하기 전까지 512×512 해상도 기반의 SD1.5 파인튜닝 모델이 전세계적으로 활발하게 학습되고 공유되면서, 모델 자체의 디테일과 표현력이 굉장한 수준으로 상승했습니다. SDXL은 기본적으로 SD1.5보다 높은 해상도의 … Read more
컨트롤넷 오픈포즈 스켈레톤을 ComfyUI 안에서 바로 조작하고 이미지 생성까지 할 수 있도록 해주는 3d pose editor를 설치하고 사용하는 방법에 대해 살펴보겠습니다. ComfyUI 3D Pose Editor 설치 ComfyUI 3D Pose Editor는 기존의 웹 또는 WebUI에서 동작하던 3D Pose Editor를 ComfyUI 내에서 곧바로 사용할 수 있도록 배포된 커스텀 노드입니다. 따라서 기본적인 포즈 조작방법이나 사용법은 웹버전 또는 WebUI … Read more
스테이블 디퓨전으로 인물 이미지를 주로 생성하시는 분들께는 종종 등장하는 기괴한 손이 항상 골치덩어리입니다. 때문에 전세계 여러 유저들이 다양한 방법으로 손 보정 기술을 개선해 최근에 이르러서는 꽤 그럴듯한 보정이 가능해졌습니다. 본문에서는 컨트롤넷을 활용한 대표적인 손 보정 기술 중 하나로 Inpaint-Depth를 기반으로 한 HandRefiner에 대해 살펴보도록 하겠습니다. Mesh Graphormer 손 보정(Hand Refiner) 방법 인물 사진의 손 부분을 … Read more
ComfyUI를 조금 더 깊이 있게 다루면, 프롬프트 엔지니어링을 더욱 정밀하게 제어할 수 있습니다. 사용자가 작성한 프롬프트는 결국 conditioning 단계를 거쳐 U-Net으로 넘어가게 됩니다. 그럼 이 Conditioning 단계를 제어하면 조금더 프롬프트를 사용자의 입맛에 맞게 효율적으로 사용할 수 있지 않을까요? 본문에서 한 번 살펴보도록 하겠습니다. 기본 이미지 생성 먼저 테스트에 사용할 기본 이미지를 생성해보겠습니다. 기본 워크플로우(default node)를 … Read more
본 글에서는 Roop Unleashed라는 기술을 활용해 빠르고 간편하게 인물의 얼굴을 바꿔 영상을 만드는 방법을 살펴보고자 합니다. AI 영상 기술이 빠른 속도로 발전하면서 일관성있는 인물 영상이 속속 등장하고 있지만, 여전히 가정의 PC로는 구현이 어려운 고스펙 하드웨어를 요구하는 영역입니다. 때문에 현재 대부분의 개인이 만든 스테이블 디퓨전 기반 AI 영상은 기존 영상에 가상의 얼굴을 입히거나, 약간의 수정을 가하는 … Read more
본문에서는 윈도우 심볼릭 링크 기술을 사용해 스테이블 디퓨전 모델 폴더를 공유해 컴퓨터 용량을 효율적으로 관리하는 방법을 살펴보고자 합니다. 스테이블 디퓨전을 장기간 사용하다보면, WebUI, ComfyUI 및 WebUI Forge 등 다양한 UI를 설치하면서 각각 가상환경을 따로따로 구성하고, 또 체크포인트, 로라, VAE 등 모델을 따로따로 사용하면 디스크 용량이 금방 차올라 부족하기 마련이지만, 심볼릭 링크를 사용하면 이런 용량 문제를 … Read more
여러번 소개드린 것처럼 스테이블 디퓨전의 이미지 생성 과정에서 사용자 개입을 가장 강력하게 도와주는 기능이 바로 컨트롤넷(ControlNet)입니다. 오늘은 InstantID에 대해 살펴볼 예정인데요, InstantID는 컨트롤넷 중에서도 IP-Adapter에 포함되는 기능으로, 사용자가 원하는 얼굴의 생김새와 스타일로 다른 얼굴의 각도까지 대체할 수 있는 강력한 확장 기능입니다. InstantID 개념 컨트롤넷 중에서도 IP-Adapter 즉, 이미지 프롬프트(IP: Image Prompt)의 한 기능으로 분류되는 InstantID는 … Read more
이전 글에서 소개드린 WebUI와 컨트롤넷을 사용하는 방법과 달리 ComfyUI에서 원하는 의상을 바로바로 쇼핑몰 AI 피팅 모델에 입혀보는 방법에 대해 소개드리도록 하겠습니다. AI 쇼핑몰 모델 생성 스테이블 디퓨전을 공부 및 사용하면서 아무래도 가장 많이 고려하는 부분이 바로 활용성일 것입니다. 현업에서 디지털 아티스트로 활동중인 분들은 포토샵이나 일러스트, 블렌더 등에 접목해 이미 그 활용 방식을 굳건히 하고 계시겠지만, … Read more