PonyモデルでAI動画やるのはまだまだ大変そうなのでまずはSD1.5で試行錯誤を続けていたところ、
左:最初のサンプリング結果
中:アップスケールした結果
右:フェイスデテクター後の結果
なっちLoraを入れてるんですが、効いてるかどうかよくわからんですねw同じモデルとプロンプトでForgeで描いてもらうと
それっぽく描いてくれるんだけどなぁ(´・ω・`)
ちなみにワークフローのベースは以前参考にしたサイトのやつで、配線整理なんかの細々した変更はありますが、大きくはソフトエッジ処理をバイパスにして、フェイスデテクターのモデルを
コレ↑に変えたくらいです。
初期設定では顔を切り出しして貼り替えるモデルだったんですが、フェイスデテクターで処理をした部分は画像が荒ぶるのと、ぼやけた感じが消えるので、胴体との差が大きくアイコラ感がすごかったので
全体を書き直すやつに変更しましたw
フェイスデテクター処理をするとゴミがかなり出るので、これくらいのサイズなら中で止めてもよさそうですけどね。フェイスデテクター部分はメモリ不足でよくエラーでますし(´・ω・`)
フェイスデテクター部分でメモリ不足の場合は、
guide_sizeを小さくすればとりあえず処理が継続できるみたいです(゚∀゚)デメリットは不明w
それにしても服とかのブレがどうしても排除できないんですよねー。普通の服を着せるとこのレベルで荒ぶりますw
でも、一番大事なのは元動画の選定なんだろうなぁw
左:最初のサンプリング結果
中:アップスケールした結果
右:フェイスデテクター後の結果
なっちLoraを入れてるんですが、効いてるかどうかよくわからんですねw同じモデルとプロンプトでForgeで描いてもらうと
それっぽく描いてくれるんだけどなぁ(´・ω・`)
ちなみにワークフローのベースは以前参考にしたサイトのやつで、配線整理なんかの細々した変更はありますが、大きくはソフトエッジ処理をバイパスにして、フェイスデテクターのモデルを
コレ↑に変えたくらいです。
初期設定では顔を切り出しして貼り替えるモデルだったんですが、フェイスデテクターで処理をした部分は画像が荒ぶるのと、ぼやけた感じが消えるので、胴体との差が大きくアイコラ感がすごかったので
全体を書き直すやつに変更しましたw
フェイスデテクター処理をするとゴミがかなり出るので、これくらいのサイズなら中で止めてもよさそうですけどね。フェイスデテクター部分はメモリ不足でよくエラーでますし(´・ω・`)
フェイスデテクター部分でメモリ不足の場合は、
guide_sizeを小さくすればとりあえず処理が継続できるみたいです(゚∀゚)デメリットは不明w
それにしても服とかのブレがどうしても排除できないんですよねー。普通の服を着せるとこのレベルで荒ぶりますw
でも、一番大事なのは元動画の選定なんだろうなぁw
↓フレーム補完までやったやつ。↑のグリーンバックのGIFの1/4のコマ数です。
コメント