하루가 멀다하고 FLUX 관련 기술들이 발전하고 있습니다. 최근들어 Local에서 FLUX LoRA 학습을 많이들 진행하는 추세인데요, 일반적으로 구동에 비해 학습은 “정밀도”를 더욱 요구하는 작업이기 때문에, 절대적인 컴퓨팅 파워가 받쳐주지 않으면 아예 진행 자체가 불가합니다. 때문에 초기에는 낮은 VRAM에서는 FLUX LoRA 학습 자체가 불가했지만, 여러 우회로가 확보되면서 현재는 상대적으로 낮은 12GB의 VRAM을 탑재한 GPU에서도 로라 학습이 가능한 … Read more
본문에서는 윈도우 심볼릭 링크 기술을 사용해 스테이블 디퓨전 모델 폴더를 공유해 컴퓨터 용량을 효율적으로 관리하는 방법을 살펴보고자 합니다. 스테이블 디퓨전을 장기간 사용하다보면, WebUI, ComfyUI 및 WebUI Forge 등 다양한 UI를 설치하면서 각각 가상환경을 따로따로 구성하고, 또 체크포인트, 로라, VAE 등 모델을 따로따로 사용하면 디스크 용량이 금방 차올라 부족하기 마련이지만, 심볼릭 링크를 사용하면 이런 용량 문제를 … Read more
일전에 SD1.5 모델에 LCM 로라(LoRA)를 적용해 이미지 생성 속도를 대폭 상승시키는 방법에 대해 소개드린 적이 있습니다. 본문에서는 SD1.5의 LCM 로라와 유사한 SDXL 라이트닝 모델을 적용하는 방법과 워크플로우에 대해 함께 살펴보도록 하겠습니다. SDXL 라이트닝 적용 방법 SDXL은 아무래도 SD1.5에 비해 높은 사양의 하드웨어를 요구하다보니 진입장벽이 조금 더 높은 것이 사실입니다. 게다가 SD1.5가 처음 공개된 이후 수많은 … Read more
로라 모델 중 컨셉 슬라이더를 사용하면 가중치 조절만으로 이미지의 일관성을 최대한 유지하면서 특정 특징만 변경하는 것이 가능합니다. 예를 들어 Age Concept Slider를 사용하면 나이를 조절할 수 있고, Weight 컨셉 슬라이더를 사용하면 인물의 체형도 변경할 수 있습니다. 본문에서는 컨셉슬라이더를 사용하는 방법과 그 결과에 대해 살펴보도록 하겠습니다. 컨셉 슬라이더 일전에 소개드린 바와 같이 로라 모델은 체크포인트 모델에 … Read more
스테이블 디퓨전은 기존의 SD1.5에서 SDXL로 넘어오면서 화질개선과 더불어 프롬프트 이해도 수준도 한층 더 높아졌습니다. SD1.5에서는 텍스트 로고 디자인을 위해 부가적으로 포토샵 등의 이미지 편집 프로그램을 사용하고, 여러 컨트롤넷을 접목해야 그럴듯한 결과물을 얻을 수 있었는데요, SDXL에서는 간단한 로라 적용만으로도 꽤 쓸만한 텍스트 로고 디자인이 가능해졌습니다. 본문을 통해 함께 살펴보겠습니다. SDXL 텍스트 로고 디자인 방법 앞서 말씀드린 … Read more
많은 분들이 스테이블 디퓨전을 WebUI로 입문하신 뒤 조금 더 관심을 갖고 사용하다보면 ComfyUI까지 넘어오시곤 합니다. 하지만 처음에는 WebUI에서는 당연하다고 생각했던 기능들이 ComfyUI 에서는 당연하지 않아 당황스럽습니다. ComfyUI에서는 기능을 수행하기 위해 노드의 구성을 수동으로 작성해야 해서 각 노드의 기능을 정확히 이해해야 자유롭게 사용이 가능합니다. 알고나면 별 것 아닌데, 처음에는 당황스러운 노드구성, 오늘은 ComfyUI에서 로라(LoRA)와 컨트롤넷을 구현하기 … Read more
간혹 스테이블 디퓨전을 사용중인 분들 중 모델과 LoRA를 직접 만들어 배포하시기도 하지만 대부분의 경우 특별히 필요한 경우가 아니라면 어디선가 먼저 공유를 받습니다. Cvitai는 Huggingface와 더불어 모델(체크포인트) 및 로라 등 스테이블 디퓨전 관련 자료들이 가장 활발히 공유되고 있는 에셋 플랫폼입니다. 하지만 Civitai에서 다운받은 모델과 LoRA 등을 WebUI에서 사용할 때 세부 정보를 확인하기 위해 매번 웹 브라우저를 … Read more
지난 글에서 LCM 로라를 활용하여 스테이블 디퓨전 그림 생성속도를 엄청나게 빠르게 끌어올리는 방법을 알아봤습니다. 그리고 이 LCM LoRA의 빠른 그림 생성 속도를 활용하면 AI 실시간 그림 그리기가 가능하다고 말씀드렸는데요, 본 글에서는 ComfyUI에서 실제로 그림을 실시간으로 그려보도록 하겠습니다. ComfyUI LCM 로라 세팅 오늘은 ComfyUI에서 AI 실시간 그림을 그려야 하는데요, 이를 가능케 하기 위해서는 LCM 로라 세팅을 … Read more
LCM 로라의 원리에 대해 간략히 살펴보고, LCM 로라를 활용해 기존의 스테이블 디퓨전 모델의 생성 속도를 개선하는 방법 및 속도 개선된 스테이블 디퓨전 모델 병합 방법에 대해 알아봅니다. LCM 로라 LCM-LoRA란 일관성모델(CM: Consistency Model)에 기반을 둔 로라 학습 모델로, 기존 스테이블 디퓨전 이미지 생성 단계를 대폭 줄여 이론상으로는 1스텝 만에 그림을 만들어낼 수 있게 해주는 기술입니다. … Read more