AI-Assistant試行錯誤第四弾 今回は「自分が描けない物を補助してもらう」がテーマ 肩回りと背中が苦手なので、それを中心にした下絵を描く(1枚目)→線画抽出(2枚目)→手動で「こうじゃない？」と修正(3枚目)→抽出2回目(4枚目) 続く #SD研記 #TriUnity研記 pic.twitter.com/SlloJOCpdD x.com/kurohudeAI/sta…

今度は「ラフ絵から始めてどれくらいでどこまでたどり着けるのか」を確認 1枚目：手描きラフ(10分くらい) 2枚目：線画抽出→抽出画から再度抽出 3枚目：影つけ 4枚目：合成 慣れれば30分以内には自分のイメージ、その着地点的なものにたどり着ける感じ。 #TriUnity研記 #SD研記 pic.twitter.com/KIMuSMtYe4 x.com/kurohudeAI/sta…

今回は前回抽出した線画を自分でクリンナップ後、再度線画抽出を実行。その後は影つけまでの流れをそのままやってみた。 一枚目：手動クリンナップ 二枚目：線画抽出 三枚目：ライティング 四枚目：影つけ 手動クリンナップが今まで二時間かかっていた事を考えると凄い楽だわ。 #TriUnity研記 #SD研記 pic.twitter.com/Q2atqyzbFU x.com/kurohudeAI/sta…

AI-Assistantの挙動あれこれ 今度は比較的ふつうめの下絵を採用。線画抽出→ライティング→影つけ→合成 顔周りは自分のニュアンスからはだいぶ離れてしまうので要修正という感じだけど、ざっくりとした下絵からここまで詰めれるのは結構ありがたいな～ #TriUnity研記 #SD研記 pic.twitter.com/FtLaDGsftl x.com/kurohudeAI/sta…

あえて極端な描き方をした絵を使って再度線画抽出。 一度では上手にいかなかったので、影響するであろう要素をプロンプトに加えてみた。 やはりというか、ある程度の「自分の領域（描き方）」を確立してしまっていると、線画の抽出もかなり苦労する。 #TriUnity研記 #SD研記 pic.twitter.com/FoWtuzyaBb x.com/kurohudeAI/sta…

とりにくさんが開発した『AI-Assistant』を導入、自分絵から線を抽出してみました。 1枚目はオリジナル 2枚目は忠実度を高めに設定 3枚目は低めに設定 ……なかなかいいんじゃない！？ #TriUnity研記 #SD研記 pic.twitter.com/ypvrfSdFKV

#SD研記 NSFW解禁タグを用いた方が色香が段違いすぎるんだけど、裸率が急上昇するので対策が必要ね pic.twitter.com/6RBGfJk5TC

#SD研記 画風LoRAを併用してはいるものの、おおよそ望み通りの顔つきが生成できるようになったかなぁ。 本家→anime→js pic.twitter.com/z6omDrMWMY

#SD研記 #TriUnity研記 OrcLoRA＋自分絵reference＋生成絵IP-Adapter 遺伝子、自分絵の遺伝子を感じるよぉ～！！！！！！！！！！！！！！！！！！！！ pic.twitter.com/wmednafspK

#SD研記 これくらい雑な感じのオークを生成できるようにしたいな pic.twitter.com/9lY8tjlkWf

#SD研記 自撮りオークを生成しようとしてオークの尊厳を破壊しているような感覚に陥るなどと pic.twitter.com/q4Ni4ZJ7Rk

#SD研記 NijiMaleV1.2試作モデル11番目にしてようやく気付いたのですが、光の過学習問題はVAEが原因っぽいですね・・・ これは1.5ベースモデルで学習したのですが、ヨユーで過学習が発生してる pic.twitter.com/NBSMst5Zi1

#SD研記 グリマーちゃん次期有力バージョンはツヤツヤとテカテカがむちゃくちゃ強い。プロンプトはこれだけ。 mature male, male focus, happy smile, jumping, dance studio, pic.twitter.com/MVexW2nT4l

#SD研記 グリマーちゃんの改修作業中…改修っていうよりは、先鋭化に近い気がする pic.twitter.com/JN7qzHE0tD

#SD研記 IP-Adapterは処理も軽くて生成時間がほぼ増えないのが利点ではあるんだけど、どうしても袋小路にハマってしまう場面がある。そういう時はreference系のパラメータをいじってみると良い感じになったりする。 pic.twitter.com/GZE2ZSzWoh

#SD研記 #LoRAなんもわかんない NijiMale_v1.2(test)の反応が思いのほか良かったので、ちょっと調整中... pic.twitter.com/64oU1HxP1K

#SD研記 じぶん好みのモデルが作れないなら、LoRAをつくればいいじゃない pic.twitter.com/JBhGMChosA

#SD研記 ArtMale、サンプルにもアップしているがOrangeMixシリーズと実は相性がいい pic.twitter.com/vbeSxCckJ7

#SD研記 光の過学習が問題となっている(そして解決できていない)nijimaleLoRAですが、先日公開してArtMaleと組み合わせるとい～感じにまとまるっぽいis不思議 pic.twitter.com/Wmnaf6RIh5

#SD研記 印象派LoRAの挙動を把握しているところなのですが、GlimmerGenより前のモデル(実写より)で生成したらちょっと面白い感じになった。 筋肉が変な事になっているのはさておき、構図力というか、描写がずいぶんと目を引く。 pic.twitter.com/OEV68NRh8Y

#SD研記 印象派系プロンプトはアプスケ込々の内容ではあるんですが、だいたいこんな感じにまとまりつつある。 打率はやや低めではあるんだけど、無茶苦茶自分の好みなんですよね。良き。 pic.twitter.com/S7GyHVPi78

#SD研記 印象派系プロンプト、NijiMaleやflat等のLoRAを適用させずに拙モデル(GlimmerGen)で生成するとこんな感じになります。強度等は使用しているモデルで調整してください。 Prompt: (Impressionism:1.5), (Edgar Degas, Claude Monet:1.35), (Alfons Mucha, Gustav Klimt:1.4),(Art nouveau:1.3) pic.twitter.com/tG0I0gCs64

OrcLoRA(v1.0)のバリエーションの狭さに飽き飽きしてきたので、前段階の不安定版と階層調整をさせながらmixしまくる実験 感覚的にはin層は全てカットし、out層の顔・肉体を表出させればいいんだけど、納得のいくラインってのは難しいわね #SD研記 pic.twitter.com/bBT00TCydL

#SD研記 #LoRAなんもわかんない 調整で100枚くらい生成して何がいいのか何が悪いのかがわからなくなってきた 一枚目はLoRA適用前 二枚目は階層調整済nijimale適用 pic.twitter.com/01VwHjEedj

#SD研記 途中で止まっていたnijimaleの次verですが、階層調整をしてこんな感じに。基本的にはモデルが持つ性能を引き出す感じにしつつ、出力層でそれっぽくするとちょうど良さそう。 pic.twitter.com/hNI5SjSjUD

#SD研記 単純に「Short leg」を強調して入力しても短足にはならないので、やはりLoRAを作った方が早い気がしてきた pic.twitter.com/XozqGcuzT7 x.com/kurohudeAI/sta…