AI Booster - ControlNet

ControlNet is a neural network structure to control diffusion models by adding extra conditions.

Image Credits: lllyasviel/ControlNet

承襲上篇，這系列文章是透過蒐集、分享我覺得有意思AI服務、相關文章、影片，期許自己能更了解這世界上正在發生什麼。

GitHub - lllyasviel/ControlNet: Let us control diffusion models!

ControlNet 是透過添加額外條件來控制擴散模型的人工神經網路結構，將原本神經網路的權重資訊，分成鎖定副本(locked copy)和可訓練副本(trainable copy)， 進一步繪製新的圖片。

Image Credits: lllyasviel/ControlNet

以下介紹其中幾個功能

Canny 邊緣檢測再以AI繪製新的圖片。

Image Credits: lllyasviel/ControlNet

M-LSD檢測

Image Credits: lllyasviel/ControlNet

HED 邊界檢測

Image Credits: lllyasviel/ControlNet

使用塗鴉簡圖製圖或使用原圖轉換塗鴉簡圖後製圖

Image Credits: lllyasviel/ControlNet

Image Credits: lllyasviel/ControlNet

偵測姿勢後繪製新的圖片

Image Credits: lllyasviel/ControlNet

更多細節可參考此研究

Thank you and enjoy it :)