広告

ComfyUI 画像生成の LoRA について(Krea 2 系モデル)

AI

Lora について

LoRA(Low-Rank Adaptation:低ランク適応) は、Stable Diffusion などの大規模生成モデルを微調整するための効率的な手法です。
事前に学習済みのモデルに、学習可能な低ランク行列を導入することで、モデル全体の再学習ではなく、一部のパラメータのみを調整し、特定のタスクに対する最適化を、比較的低い計算コストで実現します。
SD1.5 などのベースモデルと比較して、LoRA モデルはファイルサイズが小さく、学習も容易です。
https://docs.comfy.org/ja/tutorials/basic/lora#comfyui-lora

おすすめ LoRA

ノードの説明

LoRA ローダーモデルのみ(Load LoRA)

  • このノードはチェーン接続に対応しており、複数の Load LoRA ノードを直列に接続することで、複数の LoRA モデルを同時に適用できされる
  • 拡散モデル読み込み(UNet Loader/Load Diffusion Model) と K sampler の間にこのノードを入れると、LoRA モデルが適用される
  • LoRA のモデルを適用するには、特定のキーワードをプロンプトに入れる必要があるので、それぞれの LoRA の説明を読もう
  • 新規 LoRA 入れたら、ComfyUI を再起動すると選択できるようになる
  • Inpainting にのみ使う場合、スタイルを LoRA からの影響はかぎられているので、画像生成時から LoRA を使いましょう
  • LoRA モデルロード時に、モデルの強度を選べるので、0~1.0 の間で、強度を調節する(1.0 が一番強い)

※ 「LoRA 読み込み」ノードも存在しますが、CLIP が必須になります。

ワークフロー

コメント

タイトルとURLをコピーしました