ControlNet

ControlNetとは、大規模な拡散モデルをはじめとする既存の画像生成AIに対して、ポーズ情報、線画、深度マップ、領域分割などの多様な追加条件を入力することで、出力される画像の構図や姿勢、形状を極めて精密に制御することを可能にするニューラルネットワーク構造およびその技術全般を指します。従来の画像生成AIはテキストプロンプトのみによる指示が主流であり、意図した通りの詳細な構図や人物のポーズを再現することが困難でしたが、ControlNetを導入することにより、基盤となるAIモデルの重みを固定したまま、特定の条件を学習させた追加のモジュールを効率的に結合し、思い通りの視覚的要素をコントロールできるようになりました。