생성형AI

Stable Diffusion-인터페이스, Github extension, ControlNet

도그사운드 2023. 10. 30. 14:25

인터페이스

로컬 실행화면

완성 후에 결과물 관련 캡션을 확인해보면 Seed가 있다.

위의 테이블 밑에서 3번째 줄 Seed: 19030... 인데 이 씨드 값을 사용하면 기존 작업물을 재활용할 수 있다.

 

프롬프트 중에는 결과에 반영되지 않는 경우가 있다. 

예를 들어 wireless같은 단어는 반영되지 않는다. 

이것은 wireless가 학습되지 않았기 때문이다.

checkpoint는 사전학습 pre-training 으로서 이런 것들이 학습되지 않았을 수 있다.

이런 경우는 사전학습에 부가적으로 추가학습이 필요하다.

LoRA가 그러한 역할을 한다.

 

setting

 

용어

Checkpoint

- 프롬프트로 이미지 생성이 가능하도록 사전학습된 모델

 

LoRA, RyCORIS

- checkpoint가 생성하는 이미지에 특정 컨셉을 반영할 수 있도록 추가학습한 파일

 

VAE

- 이미지를 화면으로 내보내는 신경망, 색상과 화질에 영향을 주는 역할

 

Textual Inversion

- negative prompt 에 입력하여 이미지 품질을 높일때 사용

 

ControlNet

- 이미지를 넣어 새로운 이미지를 생성하고자할때 사용

 

업스케일러

Hires.fix, Ultimate SD upscale ControlNet에 사용

 

 

확장 프로그램

 

프롬프트를 쉽게 선택하는 확장프로그램

일어

https://github.com/blue-pen5805/sdweb-easy-prompt-selector

 

GitHub - blue-pen5805/sdweb-easy-prompt-selector

Contribute to blue-pen5805/sdweb-easy-prompt-selector development by creating an account on GitHub.

github.com

영어

https://github.com/butaixianran/sdweb-easy-prompt-selector

 

GitHub - butaixianran/sdweb-easy-prompt-selector

Contribute to butaixianran/sdweb-easy-prompt-selector development by creating an account on GitHub.

github.com

 

인기순위에 따른 태그 안내 및 자동완성

https://github.com/DominikDoom/a1111-sd-webui-tagcomplete

 

GitHub - DominikDoom/a1111-sd-webui-tagcomplete: Booru style tag autocompletion for AUTOMATIC1111's Stable Diffusion web UI

Booru style tag autocompletion for AUTOMATIC1111's Stable Diffusion web UI - GitHub - DominikDoom/a1111-sd-webui-tagcomplete: Booru style tag autocompletion for AUTOMATIC1111's Stable Diffu...

github.com

 

ControlNet

https://github.com/Mikubill/sd-webui-controlnet

 

GitHub - Mikubill/sd-webui-controlnet: WebUI extension for ControlNet

WebUI extension for ControlNet. Contribute to Mikubill/sd-webui-controlnet development by creating an account on GitHub.

github.com

 

pose를 셋팅할 수 있다

https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main

 

lllyasviel/ControlNet-v1-1 at main

Detected Pickle imports (3) "torch._utils._rebuild_tensor_v2", "collections.OrderedDict", "torch.FloatStorage" What is a pickle import?

huggingface.co

 

 

'생성형AI' 카테고리의 다른 글

SciBERT  (2) 2024.10.08
ControlNet  (0) 2023.12.12
Image segmentation  (0) 2023.10.07
Video Generator  (0) 2023.10.04
BERT  (0) 2023.06.27