SDXL用Controlnetが理解る！おすすめモデル＆活用例を徹底解説
Added 2024-06-06 06:20:34 +0000 UTC
Comments
ありがとうございます！試してみましたがうまくいきませんでした。XにてDMさせていただきます！
gu
2025-05-18 02:24:45 +0000 UTC拝読した感じですと、全体にとても暗い画像が出てしまうというのは不思議ですね。ぱっと思いつくのは、白黒逆転した画像を使うべきところを間違えた（もしくはプリプロセッサで白黒逆転させずnoneでそのまま読み込ませた）場合にそういうことはよく起きますが、そうではないとのこと。一つ試していただきたいのは、何かの画像のimage2imageではなく純粋にt2iで同じことをしてみてはいかがかということです。それも、ＣＮモデルはLineart_v10ではなく、AnytestV3かV4を試してみてはどうでしょうか。プリプロセッサnone、モデルはanytest、読み込ませる画像はクリスタで修正した「正しい線画」です。黒ベースに白で書いたものでもよいですが、できれば白ベースに黒に反転させた線画だと良いと思います。その他強度などはデフォルトです。これで同じ現象が起きるようなら、DMなどでスクショを送っていただけると何か分かるかもしれません。
AIイラストが理解る！【スタジオ真榊】
2025-05-17 13:51:40 +0000 UTCいつもお世話になっております！lineartについて質問させていただきたいです！ lineartで作られた黒背景白線画の画像を修正し、再度lineartを使って画像生成するのですが、全体的に黒っぽい、とても暗い画像が生成されて困っております・・・・対策をご教示いただけますと幸いです。 ◾️環境 ・stable diffusion ・papaerspace ・illustsious系モデル ・CN:Illustrious-XL Lineart Anime(下記の物を使いました。) https://civitai.com/models/1020431/illustrious-xl-lineart-anime ◾️lineartを使用する目的 (1)実写→イラスト化をしたい。 ・実写の写真から線画継承をし、自分が使っているモデルの絵柄のイラストを生成したい。例えば背景写真をイラスト化したり、自分の手を写真でとってイラスト化したいです。 (2)イラスト修正をしたい。 ・生成したイラストを線画化し、線画を自分で修正し、その後線画からイラストを生成したい。例えばキャラの髪型やアクセサリーの形が微妙に違うなどを修正したいです。（インペイントだとうまくいかないことも多いので。） ◾️画像生成の仕方 ・i2iにてCNを使用 ・denoising strengthは0.4~0.7くらい ◾️発生している事象（悩み） とくに目的(2)についてです。 ・Preprocessor:lineart anime ・Model：illustriousXLLineart_v10 にて、黒背景に白線の線画を生成し、それをクリスタ上で、修正しています。（消したいところを黒く塗り、描きたいところは白で線を引いています。） 修正した線画を再度i2iのCNにインポートし、 ・Preprocessor：none ・Model：illustriousXLLineart_v10 にて画像生成すると、ほとんど黒背景白線の線画と変わらない画像が生成されてしまいます。 denoising strengthを1まであげると、普通の色の画像がでてくるんですが、それでも画面がかなり暗い感じだったり、破綻が生じてしまいます。 私のやり方が間違っているのでしょうか・・・？ご教示いただけますと幸いです。
gu
2025-05-17 09:39:02 +0000 UTCNoob用を試してみます^^ お忙しいところご返信ありがとうございました！
Hachimitsu
2025-01-26 10:34:31 +0000 UTC基本的にSDXL用のものが使えるはずです。Noob用のControlnet（CannyやLineartなど）が最近出ましたので、このあたりを使ってみてはどうでしょうか。 https://huggingface.co/collections/Laxhar/noobai-sdxl-controlnet-67342fca03831b10647d7910
AIイラストが理解る！【スタジオ真榊】
2025-01-25 16:15:34 +0000 UTCいつもお世話になっております。 IllustriousにはSDXLのコントロールネットは使えないのでしょうか？ もしまとまってるリンクがあったら教えてほしいです。
Hachimitsu
2025-01-25 15:32:07 +0000 UTC色々と試してみます！ お忙しいところ、確認と修正ありがとうございました。
シンゲン@AIイラスト
2024-06-28 05:02:22 +0000 UTCForgeは有名どころの拡張がいろいろ最初から入っていて便利です！ 「thibaud_xl_openpose」修正しておきました、ありがとうございます。
AIイラストが理解る！【スタジオ真榊】
2024-06-28 02:38:08 +0000 UTC記事ありがとうございます。 おかげで、SDXLでControlNetを動かすことができました！ 質問と報告があります。 【質問】 openposeの、棒人間の修正で良い方法をご存じでしたら教えてください ※JSONファイル作成や編集に良い、サイト・ツール・拡張機能などがあれば教えていただけると嬉しいです。 困っているコト WEBUI上で棒人間を修正するとき、操作を誤ると１つ前に操作が戻らないので、面倒 ※操作を一つ前に戻る「PCショートカットキーの 【Ctrl + Z】」が出来る棒人間(JSON)の編集ツールが欲しい・・・ 使っている環境 WebUI Forge 試したことなど ・ForgeのControlNetに備わっているデフォルトの「OPENPOSE-EDITOR」で編集 ・拡張機能「sd-webui-openpose-editor」をインストールして編集 ※デフォルトと変わっていない気がします・・・ ⇒ググってみて、デフォルト機能、拡張機能、どちらも同じものという理解をしました。 所感（愚痴？） 現状は棒人間を少し修正し、JSONファイルをダウンロード、少し修正し、JSONファイルをダウンロード・・・ ※手のひらのみ移動させようとして、誤って別の部位を選択して惨事に・・・ とかになるので、指１本づつ直してはDL、DL、DL ...( = =) 【報告】 小姑みたいな発見ですが 記事の ＞今回は「shibaud_xl_openpose」に入力。 ↓ 「thibaud_xl_openpose」かと思いました。 ※何かで記事を更新されるときにでも、修正いただけると嬉しいです。
シンゲン@AIイラスト
2024-06-21 05:57:53 +0000 UTC月須和さんのnoteから配布されているhuggingfaceに飛べますよ～ https://note.com/2vxpswa7/n/n046c3e928f1e
AIイラストが理解る！【スタジオ真榊】
2024-06-09 02:32:37 +0000 UTC線画化LoRaもどこかにあるのでしょうか?
TS
2024-06-08 11:23:10 +0000 UTC丁度sdxl版のcontrolnetで試行錯誤中でした。 本当に助かります。
z-kumagon
2024-06-06 07:43:36 +0000 UTC
