학문의 길/GenAI 5

[StableDiffusion] Controlnet #2

https://www.youtube.com/watch?v=0PJZGpyM_Hs MLSD 이미지에서 직선을 추출. 건축이나 인테리어에 적합 Lineart, SoftEdge, Scibble/Sketch 선 따는 방식차이. Sciribble/Stecth가 가장 대충 선을 땄으므로 원본과 가장 다르다 Segmentation Object별로 색상으로구분 Refrence 원본의 특징을 그대로 참조한다. 위 결과를 보면 머리색, 동공 색 등이 비슷하게 나옴 특정 사람과 유사한 느낌으로 만들때 유용. 손만 고치는 방법 Upload independent control image는 img2img에서 참조 이미지 올리는 건데, 손 고치는 데는 참조 이미지 필요없으므로 체크 해제해둔다.

학문의 길/GenAI 2024.03.22

[StableDiffusion] Controlnet #1

https://youtu.be/J-9d8mF7dI4?si=tiatQ1V2U5sl8vTl ControlNet 설치 Controlnet 사용하려면 전용 모델이 필요 📌https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main pth확장자 .pth 확장자는 주로 PyTorch, 인기 있는 머신러닝 프레임워크에서 사용되는 파일 형식. PyTorch 모델의 가중치(weights), 즉 모델이 학습하는 동안 얻은 파라미터를 저장하기 위한 것. => 학습모델 같은거인듯 Canny enable: controlnet 을 쓸 것이다 Pixel Perpect: 자동으로 최적의 해상도 설정 Canny : 스케치를 딴 다음 그걸 기반으로 생성 나머지 옵션은 그냥 두는게 좋음 De..

학문의 길/GenAI 2024.03.21