Screen Shot 2022-01-02 at 7.53.00 PM.png

Inpainting + text guided conditional generation을 동시에 할 수 있는

Guided Diffusion

일반적인 Guided Diffusion 꼴: classifier 가 필요함

Screen Shot 2022-01-02 at 7.54.33 PM.png

Classifier-free guidance

Classifier가 별도로 없어도 classifier guidance의 효과를 낼 수 있다!(sampling)

Screen Shot 2022-01-02 at 7.55.06 PM.png

Screen Shot 2022-01-02 at 7.56.44 PM.png

Screen Shot 2022-01-02 at 7.57.57 PM.png

CLIP Guidance

Classifier-free guidance 외에도, CLIP model을 classifier대신 사용할 수도 있다.

Screen Shot 2022-01-02 at 7.58.21 PM.png

(결과적으로, Classifier-free guidance 방식이, CLIP Guidance보다 효과가 좋다.)