본문 바로가기

[TIP] Stable Diffusion64

[SD. TIP] LoRa 만들기, 학습을 위한 기본 준비 (feat. kohya_ss) 최근 들어 SNS 등으로 특정 인물의 얼굴을 고정시켜 줄 수 있겠냐는 문의가 들어와서 한번 도전해 보았습니다. 그 실행기를 공유해 봅니다. 잘 따라오시면 성공할 확률이 높을 것이라 생각이 됩니다. 이 포스팅은 아카라이브 채널과 깃허브, 허깅페이스에서 관련 정보를 찾아서 제가 시행착오를 겪은 내용을 바탕으로 가공하였으니 참고해 주세요. 관련 정보 링크는 포스팅 내 별도 공유하겠습니다. 그럼 시작~! 1. 기본 준비 사항- NVIDIA 그래픽카드 VRAM 6GB 이상 권장- python 3.10.x : 이미 stable diffusion webui (이하 SD)를 사용하고 있다면 별도로 설치할 필요는 없습니다.- 학습시킬 데이터셋  : 저의 경우 얼굴을 학습시키고 싶어 얼굴이 잘 나온 이미지로 35장 준비했.. 2023. 5. 6.
stable diffusion : vladmandic 버전 그동안 automatic1111 버전의 stable diffusion을 잘 써왔는데요. 본인의 그래픽 카드 자동 최적화도 되고 기존의 SD 사용하던 확장앱이나 로라 기능 사용에 문제가 없는 새로 버전이 있어서 소개합니다. 설치하는 방법은 기존의 stable diffusion 설치방법과 크게 다르지 않습니다. 깃 허브에 안내된 설명만 보고 따라 하면 쉽게 설치할 수 있을 것 같습니다. (깃허브에서 설치해 보신 경험이 있다는 전제입니다.) vladmandic 설치 링크 : https://github.com/vladmandic/automatic GitHub - vladmandic/automatic: Opinionated fork/implementation of Stable Diffusion Opinionate.. 2023. 4. 29.
[SD. TIP] controlnet으로 원하는 포즈를 추출하자 안녕하세요. 이번에는 stablediffusion의 extension cotrolnet을 이용해서 모델의 포즈를 따오고 변형하고 적용하는 방법에 대해 간단하게 다뤄보겠습니다. 1. controlnet 설치 sd webui를 실행한 후 extesions > install from URL에 들어가서 "https://github.com/Mikubill/sd-webui-controlnet" 붙여 넣어주고 Install을 합니다. 그리고 SD를 재실행하시고 UI를 리로딩해 주시면 설치가 되신 화면을 볼 수 있습니다. 2. controlnet 메뉴 구성 컨트롤이 설치되면 txt2img와 img2img 하단에 ControlNet이라는 메뉴가 생긴 것을 확인할 수 있는데요. 옆에 있는 ◀ 버튼을 통해 세부 옵션을 확인.. 2023. 4. 7.
[SD. TIP] Photoshop에서 SD를 사용하자! 오늘은 포토샵 안에서 Statble Diffusion을 플러그인으로 사용하는 방법을 알아보려고 합니다. 포토샵을 원래부터 잘 다루고 있는 분들은 SD보다는 포토샵 환경이 더 편하실 텐데요. 이 플러그인을 설치하면 포토샵 안에서 SD를 사용할 수 있으니 작업하는데 더 편하실 것 같습니다. 저 같은 경우는 잘 뽑힌 이미지들은 포토샵으로 한번 더 가져가서 손가락 등을 리터칭 하기 위해 포토샵을 이용하는 일이 잦은데 이 플러그인을 이용해서 생성과 수정을 같이 할 수 있어서 좀 더 편하게 수정할 수가 있었습니다. 1. 준비하기 우선 stable diffusion web-ui 버전이 설치되어 있으셔야 합니다. 그리고 릴리즈 버전 24이상의 포토샵이 설치되어 있어야 합니다. 설치하는 과정 및 방법에 대해서는 깃허브에.. 2023. 3. 23.
Lookbook research with AI Hi there. I'm using StableDiffusion to generate images for different fashions of women to grow my gallery. I've been researching the prompt generation process to come up with different fashions and will update this post with my findings, so let's get started. First of all, I'm a complete novice when it comes to women's fashion, so I need someone who can give me positive advice. The best advisor .. 2023. 3. 21.
[SD. TIP] Dynamic Thresholding 으로 고퀄리티를 뽑아보자 이번에는 StableDiffusion의 extensions 중에 하나인 다이나믹 쓰레숄딩에 대해서 알아보겠습니다. 이 확장앱은 이미지의 퀄리티를 더욱 더 고화질로 생성할 수 있게 도와줍니다. 다만, 완벽한 결과물을 위해서 step과 cfg scale을 맞는 값을 찾아가는데 시간이 필요하니 참고 인내해야 합니다. 내 컴퓨터 사양 및 사용하는 모델과 호환이 잘 되는 scale 값을 찾아낸다면 그 결과물은 완벽해질 수 있습니다. 1) 설치하기 우선 아래 2가지 Extension을 설치해줘야 합니다. SD를 실행시키면 메뉴 중에 'Extensions' 메뉴가 왼쪽 끝에 있습니다. 거기서 Install from URL 탭을 선택하고 URL에 아래 두가지를 붙여넣기 해서 Install을 해줍니다. https://g.. 2023. 3. 16.
[SD. TIP] LoRa를 설치해봅시다! Stable Diffusion을 어느 정도 사용해 보셨으면 느끼셨을 거예요. 생각하는 이미지가 있는데 생각보다 고정이 쉽게 안 되는 것을요. 이럴 때 사용하는 뭔가 새로운 것을 찾게 되죠. 모델을 바꾸거나 아니면 다른 AI 그림 생성 툴을 이용해 볼 수도 있지요. SD는 Lora를 이용하면 고정적인 이미지를 만들기가 쉬워집니다. *출처 : https://rentry.org/2chAI_LoRA_Dreambooth_guide_english#what-is-lora 1. LoRa의 개념 위 출처에 있는 LoRa를 바탕으로 설명해 드립니다. LoRA(Low-rank Adaptation for Fast Text-to-Image Diffusion Fine-tuning)는 Stable Diffusion 의 *.ckpt.. 2023. 3. 9.
[SD. TIP] Stable Diffusion prompt 기본 운용 이 글은 이제 막 Stable Diffusion 접하였거나 설치까지 다했는데 도저히 어떤 Prompt를 써야 할지 모르겠거나 하시는 분들을 위한 글입니다. *Stable Diffusion = SD 1. 가장 앞에 있는 단어가 가장 중요한 keyword SD 내의 prompt 입력창에 단어를 입력할 때 생각나는 대로 적어줍니다. 1girl, red umbrella, blue rainboots, rain, Rain Puddles, Rainy Day on the Street, Sadness, glow blue particles 여기서 주인공은 누구일까요? SD는 가장 앞에 있는 단어를 우선 인식합니다. 따라서 1 girl을 가장 먼저 인식해서 그리게 되고, 그다음 umbrella, rainboots 순이 되겠.. 2023. 3. 8.
[SD. TIP] Wildcard 설정으로 랜덤하게 생성하기 인간은 창의적인 지성을 가진 동물이지만 가끔 생각도 하기 귀찮을 때가 있습니다. 그렇지만 생각해서 결과를 내야 한다면 누가 대신해 주면 안 될까? 스테이블 디퓨전(이하 SD)으로 작업하고 있을 때도 한 번쯤은 고민해 보셨을 겁니다. 오늘은 어떤 콘셉트로 이미지를 만들까? 어떤 장소.. 누가 나오게 할까? SD의 확장기능으로 나온 wildcard를 이용하면 고민 없이 적당히 AI가 만들어준 콘셉트를 이용할 수가 있습니다. 이제부터 그 방법을 알아보도록 하겠습니다. 1. SD에 wildcard 확장하기 SD를 실행시키면 메뉴 중에 'Extension' 메뉴가 왼쪽 끝에 있습니다. 거기서 Install from URL 탭을 선택하고 URL에 https://github.com/adieyal/sd-dynamic-.. 2023. 3. 1.