Open1

Stable Diffusion でやりたい

メモメモ

メモ

  • リアルな写真の画像生成、結構な頻度で奇形になるのなんとかならないかなぁ
  • 同じプロンプトでもモデル毎に結構印象のちがう画像が出力されるので、モデル毎のプロンプト調整が必要なんだなぁ
  • 普通の高画質化は Hires. Fix ではなく Extras タブからやるのでよかった
  • GPT-4 に考えさせたプロンプトを StableDiffusion WebUI のスクリプトに入力するの、いいかも
  • Inpaint anything、高速で動くならめっちゃ便利だなぁ
  • リアルタイムで CFG Scale とかをノブで回しつつ VJ できるとおもしろそうだな
  • 高画質化してから服の色を変えたりしたほうがいのか、服の色を変えてから高画質化したほうがいいのかa
    • Inpaint などで服の色を変えてから高画質化すると大きく画像の内容が変わりそうなので、まず高画質化したほうがよさそうな気はする
    • なのでやっぱり高画質化したあとにも素早く試行錯誤できるように速い GPU ほしいなぁ
  • 基本的なできるようになりたいこと
    • 人物の表情を変える
    • 人物のポーズを変える
    • 人物の顔を変える
    • 人物の体型を変える
    • 人物の服装を変える
    • 人物の服装を簡素化・無地化する
    • 一度生成した画像の解像度をあげる

TODO

  • Seed が近いほど同じ顔になるらしいので、face focus とかで顔より画像作って、Seed を 1 ずつインクリメントしていったのを動画にしたい

  • 架空のヘッドホン、架空のギターなども生成したい

  • 毎晩なんか時間かけて画像・動画生成したい

  • StableDiffusion WebUI で指定できるパラメーター、一通り理解したい

  • Control Net の機能をもっといろいろ試したい

  • デビッド・リンチっぽい画像を生成したい

  • ねぷた絵 / 呑龍さんの絵を学習させてねぷた絵を自動生成してみたい

  • Gradys Knight and The Pips みたいな画像を生成したい

  • 猫たち美少女化、もっとやりたい

  • うちの猫たちが外を歩いてる写真を生成したい

  • 架空のスニーカーのデザイン生成させたい (Nike AF-1 などをベースに)

  • モノトーンの漫画生成できないのか

  • 好きな画像できたら LoRA にするといいのかな？ (同じキャラを生成するために LoRA 作る的な)

  • 【Stable Diffusion】同じ顔にできるReference Onlyの使い方について解説 | AIイラスト攻略

    • Reference only の場合、高解像度化はできないとか

  • LoRA を作るとき、キャプション的なやつをアレしたほうがよい？

  • 自分が描いた絵を学習させてみる

  • 猫の写真を学習させるとき、猫だけ切り抜いて部屋の背景は含めないほうがいい？

  • testmemo-v0.0.0.safetensors、ファイル名変えたのに stable-diffusion-webui から使うと名前が test2-v0.0.0 となってしまう気する

PENDING

  • Checkpoint の追加学習モデルとして LoRA を作るということは、Checkpoint 本体を使わないとそこから派生した LoRA は利用できない？
    • 適当にダウンロードした LoRA は利用できてるようにも見えるが…
  • 同じ Seed だと同じ顔になるというのは、Prompt を引き算しても変わらないのか？ 足し算したほうが変わらない？
    • そうだとすると、なるべくシンプルな Prompt + Seed で目的の顔を作り出したほうがよい？

DONE