記事ありがとうございます!!

一つ疑問なのですが、stable diffusion websiteを実行している間は常時CPU、メモリ使用料は発生するのでしょうか？
画像生成の計算時にそれに追加して、計算時間分のGPU使用料が加算されるのでしょうか？

質問ありがとうございます～！

ちょっと検証してみた感じ、CPUはあまり使ってないっぽいですがGPUは常に食ってるっぽいですね～たぶん実際には使ってないと思うんですが...

あとはメモリ(RAM)を食うのでその分は料金かかっちゃいますね～

使わない間は落としておいた方が良さげです (当たり前)

検証ありがとうございます!!
常時起動は現実的じゃないですねw
GPU処理だけをModalで行って、WebGUIはローカルで実行する便利なUIツールがあれば良いですが...

ありがとうございます。Pythonから調べまくりましたｗ
Google Colabから流れて来ましたが、課金するならModalにします。

モデルの変更までは出来たのですが、Civitaiのモデルの導入方法がわかりませんでした。
動いただけでも感謝しております。

仕事上でプログラマーと接することは有りましたが制御系でした。まさかこんな感じでコードに触れることになるとは思っていなかったので、良い体験をさせて頂きました。必要な部分からプログラミングの習得ができると楽だ（気持ち的に）と思うのですが機会がないのが現実です。

長文すみません。

同じくcolabから流れてきたものです。
大変参考になる記事ありがとうございます、同じくモデル変更は出来たのですが
ここから更にLoraファイルの追加等はできたりしますかね？

素晴らしい記事ありがとうございます！
同じくGoogle cokab難民です。ぼっち・ざ・ろっく第2話まで見ながら、ChilloutMixへのModel変更はできたのですが、LoraやEasyNegativeの入れ方を教えて頂けましたら大変幸いです。

同じく流れてきました。参考になります。
modal volume put コマンドでローカルからファイルアップロードができます。
https://modal.com/docs/reference/cli/volume#modal-volume-put

modal volume put <ボリューム名> <ローカルフォルダ> <リモートフォルダ>

例：
modal volume put stable-diffusion-webui-main lora /models/Lora

同じく流れてきました。Modalは体感、Google Colabの倍速で画像をサクサク作成できるので気持ち良いですね！
上の方も書かれていますが、下記の通り、Loraその他のファイルのアップロードに成功できましたので共有します。

【モデルファイルの追加】
カレントディレクトリの下に「Stable-Diffusion」というフォルダを作成し、追加で使いたいモデルファイル(ChillOutMix等)を入れ、下記コマンドを実行。
modal volume put stable-diffusion-webui-main Stable-Diffusion models/Stable-diffusion/

【Loraファイルの追加】
カレントディレクトリの下に「lora」というフォルダを作成し、そこに使いたいLoraファイルを全て入れ、下記コマンドを実行。
modal volume put stable-diffusion-webui-main lora /models/Lora

【VAEファイルの追加】
カレントディレクトリの下に「VAE」というフォルダを作成し、そこに使いたいVAEファイルを入れ、下記コマンドを実行。
modal volume put stable-diffusion-webui-main VAE /models/VAE

【Textual Inversionファイルの追加】
カレントディレクトリの下に「embeddings」というフォルダを作成し、そこに使いたいEasyNegative、ulzzang、Pure Eros Face等のファイルを入れ、下記コマンドを実行。
modal volume put stable-diffusion-webui-main embeddings /embeddings

人気ある機能の追加はコード側でいけそうです。
回避入れてないゴリラコードですけど

#Loconインストール
subprocess.run(f"git clone https://github.com/KohakuBlueleaf/a1111-sd-webui-locon /content/stable-diffusion-webui/extensions/locon", shell=True)

#TagCompleteインストール
subprocess.run(f"git clone https://github.com/DominikDoom/a1111-sd-webui-tagcomplete /content/stable-diffusion-webui/extensions/tag-autocomplete", shell=True)

WebUIを起動　の前にでも追加すればOKです

ダウンロードスクリプトの55行目にエラーが頻発したので修正しました：

53  future = executor.submit(download_image_using_modal, image_path=f'''{image_path}'''.replace("\\", "/"))

Windowsで実行するとスラッシュとバックスラッシュが混ざったパスが誤って認識され、スクリプトが動かなくなりました。
このコードに差し替えることで正常に動作します。

本記事を参考にmodalでstable diffusionを動かしています
オマケを使って画像をダウンロードするのですが、No such fileが頻発し、画像をダウンロードできませんでした。
解消方法をご教示いただけますと幸いです。
よろしくお願いいたします。

初歩的な質問で恐縮ですが、Macbookだと動かないことってありますか？
最初のmodal run get_started.pyでちょっとググったぐらいだと厳しいエラーが出てきました。

MacBook-Air-5:mymodal thunder$ modal run get_started.py
✓ Initialized. View app at https://modal.com/apps/ap-3qRSjNgFRjvBkMl20uDk2g
✓ Created objects.
├── 🔨 Created square.
├── 🔨 Created mount get_started.py
├── 🔨 Created mount
│ /usr/local/Cellar/protobuf/3.15.6/libexec/lib/python3.9/site-packages/google
└── 🔨 Created mount /Users/thunder/Desktop/mymodal/get_started.py
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
Traceback (most recent call last):
File "/usr/local/lib/python3.9/runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_details(mod_name, _Error)
File "/usr/local/lib/python3.9/runpy.py", line 111, in _get_module_details
import(pkg_name)
File "/pkg/modal/init.py", line 4, in <module>
from .app import App, container_app, is_local
File "/pkg/modal/app.py", line 4, in <module>
from modal_proto import api_pb2
File "/pkg/modal_proto/api_pb2.py", line 21, in <module>
_APPSTATE = DESCRIPTOR.enum_types_by_name['AppState']
AttributeError: 'NoneType' object has no attribute 'enum_types_by_name'
Runner failed with exit code: 1
╭───────────────────── Traceback (most recent call last) ──────────────────────╮
│ /usr/local/bin/modal:8 in <module> │
│ │
│ 7 │ sys.argv[0] = re.sub(r'(-script.pyw|.exe)?$', '', sys.argv[0]) │
│ ❱ 8 │ sys.exit(main()) │
│ 9 │
│ │
│ /usr/local/lib/python3.9/site-packages/modal/main.py:6 in main │
│ │
│ 5 def main(): │
│ ❱ 6 │ entrypoint_cli() │
│ 7 │
│ │
│ /usr/local/lib/python3.9/site-packages/click/core.py:1130 in call │
│ │
│ 1129 │ │ """Alias for :meth:main.""" │
│ ❱ 1130 │ │ return self.main(*args, **kwargs) │
│ 1131 │
│ │
│ /usr/local/lib/python3.9/site-packages/typer/core.py:778 in main │
│ │
│ 777 │ ) -> Any: │
│ ❱ 778 │ │ return _main( │
│ 779 │ │ │ self, │
│ │
│ /usr/local/lib/python3.9/site-packages/typer/core.py:216 in _main │
│ │
│ 215 │ │ │ with self.make_context(prog_name, args, **extra) as ctx: │
│ ❱ 216 │ │ │ │ rv = self.invoke(ctx) │
│ 217 │ │ │ │ if not standalone_mode: │
│ │
│ /usr/local/lib/python3.9/site-packages/click/core.py:1657 in invoke │
│ │
│ 1656 │ │ │ │ with sub_ctx: │
│ ❱ 1657 │ │ │ │ │ return _process_result(sub_ctx.command.invoke(sub │
│ 1658 │
│ │
│ /usr/local/lib/python3.9/site-packages/click/core.py:1657 in invoke │
│ │
│ 1656 │ │ │ │ with sub_ctx: │
│ ❱ 1657 │ │ │ │ │ return _process_result(sub_ctx.command.invoke(sub │
│ 1658 │
│ │
│ /usr/local/lib/python3.9/site-packages/click/core.py:1404 in invoke │
│ │
│ 1403 │ │ if self.callback is not None: │
│ ❱ 1404 │ │ │ return ctx.invoke(self.callback, **ctx.params) │
│ 1405 │
│ │
│ /usr/local/lib/python3.9/site-packages/click/core.py:760 in invoke │
│ │
│ 759 │ │ │ with ctx: │
│ ❱ 760 │ │ │ │ return __callback(*args, **kwargs) │
│ 761 │
│ │
│ /usr/local/lib/python3.9/site-packages/click/decorators.py:26 in new_func │
│ │
│ 25 │ def new_func(*args, **kwargs): # type: ignore │
│ ❱ 26 │ │ return f(get_current_context(), *args, **kwargs) │
│ 27 │
│ │
│ /usr/local/lib/python3.9/site-packages/modal/cli/run.py:114 in f │
│ │
│ 113 │ │ │ else: │
│ ❱ 114 │ │ │ │ func(*args, **kwargs) │
│ 115 │
│ │
│ /Users/thunder/Desktop/mymodal/get_started.py:14 in main │
│ │
│ 13 def main(): │
│ ❱ 14 │ print("the square is", square.call(42)) │
│ │
│ /usr/local/lib/python3.9/site-packages/synchronicity/synchronizer.py:439 in │
│ proxy_method │
│ │
│ /usr/local/lib/python3.9/site-packages/modal/functions.py:634 in │
│ _call_function │
│ │
│ 633 │ │ try: │
│ ❱ 634 │ │ │ return await invocation.run_function() │
│ 635 │ │ except asyncio.CancelledError: │
│ │
│ /usr/local/lib/python3.9/site-packages/modal/functions.py:234 in │
│ run_function │
│ │
│ 233 │ │ assert not result.gen_status │
│ ❱ 234 │ │ return await _process_result(result, self.stub, self.client) │
│ 235 │
│ │
│ /usr/local/lib/python3.9/site-packages/modal/functions.py:119 in │
│ _process_result │
│ │
│ 118 │ │ │ raise uc_exc │
│ ❱ 119 │ │ raise RemoteError(result.exception) │
│ 120 │
╰──────────────────────────────────────────────────────────────────────────────╯
RemoteError

初めまして。contlor netを導入するにはどこにファイルを作成すればよいのでしょうか？ご教示いただけますと幸いです。

違うのですね、失礼いたしました。
そもそもgit bashにてcontrolnetをgitcloneするという解釈であっていますでしょうか？私の経験としてはgoogle colabのcamanderuさんのstable diffusionのノートブックをワンクリックで起動して動かしたことと、こちらの記事のmodalでstable diffusionを起動してモデル変更やloraやeasynegativeを導入する程度の知識しか持ち合わせていないため、お手数ですが現在の状況の画像を貼らせていただくので確認してもらってもよろしいでしょうか？

git bash使えているなら、うちがわざわざどうこう言わなくてもできてる気がするのですけど笑
（コピーやcloneできるだけの知識あるなら、起動できない問題は別だと思ってます）

そんな複雑に考えないでゴリ押しですけど、git cloneをstable-diffusion-webui.py内で、
WebUIを起動　の前にでも追加。controlnetをcloneする。
その後、別ウィンドウでmodal volume put なりでコマンドプロンプトでローカルに保存してる
必要なMODELをコピーすれば動くはずです。

rgdさんが、何をされているのかが、基本文章ではよくわからないので画像お願い致します。

LoRAの追加トライしてみましたが詰まってしまいました…

（試したこと）
・Modal配下にLoraディレクトリ作成
・LoRAファイル(.safetensors)を入れる
・WebUI起動
・以下コマンドを別ウインドウで実行
modal volume put stable-diffusion-webui-main Lora /models/Lora
→起動中のWebUIリロードで変化見られず
→再起動してみたWebUIでも変化見られず

でした。
手順に誤りがあるでしょうか？

モデルを増やしてみたところ、今度は

Traceback (most recent call last):
  File "/pkg/modal/_container_entrypoint.py", line 328, in handle_input_exception
    yield
  File "/pkg/modal/_container_entrypoint.py", line 463, in call_function_async
    value = await res
  File "/root/sdwebui.py", line 122, in run_stable_diffusion_webui
    shutil.copy(model_downloaded_dir, webui_model_dir + model_id["model_path"])
  File "/usr/local/lib/python3.8/shutil.py", line 418, in copy
    copyfile(src, dst, follow_symlinks=follow_symlinks)
  File "/usr/local/lib/python3.8/shutil.py", line 264, in copyfile
    with open(src, 'rb') as fsrc, open(dst, 'wb') as fdst:

が出ました。

119  shutil.copy(model_downloaded_dir, webui_model_dir + model_id["model_path"])

ログを取ってみたところ、

model_id["model_path"]

、つまりモデルのIDを入れるところに

    {
        "repo_id": "Darekasan/Sugoimoderu",
        "model_path": "path/to/model.ckpt",
    },

のようにmodel_pathにディレクトリを書くとエラーになるようです。

解決方法としてはローカルで保存してvolume putする他に、

shutil.copy(model_downloaded_dir, webui_model_dir + os.path.basename(model_id["model_path"]))

とすることで完全解決しました。

It eats up lots of GPU! I don't think "$0.587333 per 1,000 images" is correct, or it may need some refinement. Shared volume storage
$2/GiB/month.

はじめまして、 Colab難民のtsukiyominaと申します。
こちらの手順通りにやってる積りなのですが、必ずある箇所でエラーになってしまいます。
コンピュータ知識が皆無で挑戦して、質問するのも怒られそうですが、
もし簡単に解決できるのであれば、と思い書き込ませて頂きます。

＜動作環境＞
PC :DESKTOP-9KKUSNP
windows10
プロセッサ :AMD E1-2500 APU with Radeon(TM) HD Graphics 1.40GHz
実装RAM :4.00 GB (3.46 GB 使用可能) （windows起動直後の利用可能1.7GB）

Python :3.11.1（旧バージョンがinstallされていましたが全てuninstall後に作者様に習ってこのバージョンのみinstall。PC再起動。コマンドラインでpython --version でバージョン確認済み）

＜症状＞
こちらの手順「4.Modalを使ってStable Diffusion WebUIを動かす」の所で、Timeout(6000s)を迎えて強制終了します。

＜症状までの流れ＞
1.Modalのアカウントを登録。メール返信し「認証済み」の結果を受け取っています。
2.Modalを動かしてみる
(1) windowsのコマンドプロンプト（cmd.exe）のウィンドウを開き、手順に従い以下のコマンドをこちらのページからコピー、コマンプロンプトにペーストして実行しクライアントをinstall。
以降エラーが出るまでコマンドプロンプトのウィンドウはこの１つだけの状態です。
pip install modal-client
(2)コマンドプロンプトから以下を実行。
modal token new

(1)(2)とも正常終了した模様。error表示はありません。
　　　関係ないと思いますが、(1)終了時pipのバージョンが古いとメッセージが表示されたので、指示通りににコマンドを打ち込みバージョンアップ。
　　　念の為(1)を再実行しています。

3.同じくコマンドプロンプトからget_started.pyを実行。ご説明にある"the square is 1764　と表示されていれば成功"を確認済み。

4.「Modalを使ってStable Diffusion WebUIを動かす」
　同じくコマンドプロンプトから、以下のコマンドをコピペして保存済みのプログラムを実行。
少し進んだ後にSSの箇所で止まったまま進まなくなり、Timeout(6000s経過)を迎えて強制終了してしまいます。　
modal run stable-diffusion-webui.py

↑1.からの手順を3回試行して3回とも同様にTimeoutErroになります。（3回目だけstable-diffusion-webui.py中のtimeout値を6000→時間が長ければ！と思い9999にしてみました）
無関係かもしれませんが以下も書き足しておきます。
a.コマンドプロンプトを実行しているカレントフォルダはdesktop直下に作成してあるフォルダです。
この中に手順中のpythonのプログラムを保存して実行しています。
C:\Users\user\Desktop\modalsd

Timeoutになるのは10年前のあまりにもゴミPCだからでしょうか？
何も出来ていないのに既にmodalのcreditを$8も使ってしまっています。
分からないなりにもかなり頑張って12時間以上格闘、詰んでしまいました。
他の方のコメントも一通り目を通させて頂きましたが、同じ症状の方がいらっしゃらず途方に暮れております。
もし解決方法に手間を取らないようであればご教授下さい。どうかよろしくお願いします。
長文失礼しました。

初心者です。ここ数日chatGPTでエラー箇所修正したりしていましたが、
次から次とエラーの嵐なので、修正した分で依存関係等不具合が無いか
見ていただきたいのと、
from colorama import Fore
from pathlib import Path

import modal
import shutil
import subprocess
import sys
import shlex
import os

modal系の変数の定義

stub = modal.Stub("stable-diffusion-webui")
volume_main = modal.SharedVolume().persist("stable-diffusion-webui-main")

色んなパスの定義

webui_dir = "C:/Users/User/models/stable-diffusion-webui"
webui_model_dir = webui_dir + "C:/Users/User/models/Stable-diffusion/"

モデルのID

#model_ids = [
#{
#"repo_id": "hakurei/waifu-diffusion-v1-4",
#"model_path": "wd-1-4-anime_e1.ckpt",
#"config_file_path": "wd-1-4-anime_e1.yaml",
#},
#]

@stub.function()
def my_function():
image=modal.Image.from_dockerhub("python:3.8-slim")
.apt_install(
"git", "libgl1-mesa-dev", "libglib2.0-0", "libsm6", "libxrender1", "libxext6")
.run_commands(
"pip install -e git+https://github.com/CompVis/taming-transformers.git@master#egg=taming-transformers"

.pip_install(
    "blendmodes==2022",
    "transformers==4.25.1",
    "accelerate==0.12.0",
    "basicsr==1.4.2",
    "gfpgan==1.3.8",
    "gradio==3.16.2",
    "numpy==1.23.3",
    "Pillow==9.4.0",
    "realesrgan==0.3.0",
    "torch",
    "omegaconf==2.2.3",
    "pytorch_lightning==1.7.6",
    "scikit-image==0.19.2",
    "fonts",
    "font-roboto",
    "timm==0.6.7",
    "piexif==1.1.3",
    "einops==0.4.1",
    "jsonmerge==1.8.0",
    "clean-fid==0.1.29",
    "resize-right==0.0.2",
    "torchdiffeq==0.2.3",
    "kornia==0.6.7",
    "lark==1.1.2",
    "inflection==0.5.1",
    "GitPython==3.1.27",
    "torchsde==0.2.5",
    "safetensors==0.2.7",
    "httpcore<=0.15",
    "tensorboard==2.9.1",
    "taming-transformers==0.0.1",
    "clip",
    "xformers",
    "test-tube",
    "diffusers",
    "invisible-watermark",
    "pyngrok",
    "xformers==0.0.16rc425",
    "gdown",
    "huggingface_hub",
    "colorama",
)
.pip_install("git+https://github.com/mlfoundations/open_clip.git@bb6e834e9c70d9c27d0dc3ecedeebeaeb1ffad6b"),
secret=modal.Secret.from_name("my-huggingface-secret"),
shared_volumes={webui_dir: volume_main},
gpu="a10g",
timeout=6000,
)

async def run_stable_diffusion_webui():
print(Fore.CYAN + "\n---------- セットアップ開始 ----------\n")

webui_dir_path = Path(webui_model_dir)
if not webui_dir_path.exists():
    subprocess.run(f"git clone -b v2.0 https://github.com/TheLastBen/stable-diffusion-webui {webui_dir}", shell=True)

# Hugging faceからファイルをダウンロードしてくる関数
def download_hf_file(repo_id, filename):
    from huggingface_hub import hf_hub_download

    download_dir = hf_hub_download(repo_id=repo_id, filename=filename)
    return download_dir


#for model_id in model_ids:
    #print(Fore.GREEN + model_id["repo_id"] + "のセットアップを開始します...")

    #if not Path(webui_model_dir + model_id["model_path"]).exists():
        # モデルのダウンロード＆コピー
        #model_downloaded_dir = download_hf_file(
            #model_id["repo_id"],
            #model_id["model_path"],
        #)
        #s#hutil.copy(model_downloaded_dir, webui_model_dir + os.path.basename(model_id["model_path"]))


    #if "config_file_path" not in model_id:
      #continue

    #if not Path(webui_model_dir + model_id["config_file_path"]).exists():
        # コンフィグのダウンロード＆コピー
        #config_downloaded_dir = download_hf_file(
            #model_id["repo_id"], model_id["config_file_path"]
        #)
        #shutil.copy(config_downloaded_dir, webui_model_dir + os.path.basename(model_id["config_file_path"]))


    print(Fore.GREEN + model_id["repo_id"] + "のセットアップが完了しました！")

print(Fore.CYAN + "\n---------- セットアップ完了 ----------\n")

# WebUIを起動
sys.path.append(webui_dir)
sys.argv += shlex.split("--skip-install --xformers")
os.chdir(webui_dir)
from launch import start, prepare_environment

prepare_environment()
# 最初のargumentは無視されるので注意
sys.argv = shlex.split("--a --gradio-debug --share --xformers")
start()

import asyncio
@stub.local_entrypoint()
def main():
asyncio.run(run_stable_diffusion_webui())

モジュールが見つかりませんというエラーはなぜ起きるのでしょうか？
C:\Users\User>modal run stable-diffusion-webui.pymodal run stable-diffusion-webui.py
┌─────────────────────────────── Traceback (most recent call last) ────────────────────────────────┐
│ <frozen runpy>:198 in run_module_as_main │
│ │
│ <frozen runpy>:88 in run_code │
│ │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Scripts\modal.exe_main.py:7 in │
│ <module> │
│ │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\site-packages\modal_main.py:6 in │
│ main │
│ │
│ 5 def main(): │
│ > 6 │ entrypoint_cli() │
│ 7 │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\site-packages\click\core.py:1130 in │
│ call │
│ │
│ 1129 │ │ """Alias for :meth:main.""" │
│ > 1130 │ │ return self.main(*args, **kwargs) │
│ 1131 │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\site-packages\typer\core.py:778 in │
│ main │
│ │
│ 777 │ ) -> Any: │
│ > 778 │ │ return _main( │
│ 779 │ │ │ self, │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\site-packages\typer\core.py:216 in │
│ _main │
│ │
│ 215 │ │ │ with self.make_context(prog_name, args, **extra) as ctx: │
│ > 216 │ │ │ │ rv = self.invoke(ctx) │
│ 217 │ │ │ │ if not standalone_mode: │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\site-packages\click\core.py:1657 in │
│ invoke │
│ │
│ 1656 │ │ │ │ with sub_ctx: │
│ > 1657 │ │ │ │ │ return _process_result(sub_ctx.command.invoke(sub_ctx)) │
│ 1658 │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\site-packages\click\core.py:1651 in │
│ invoke │
│ │
│ 1650 │ │ │ with ctx: │
│ > 1651 │ │ │ │ cmd_name, cmd, args = self.resolve_command(ctx, args) │
│ 1652 │ │ │ │ assert cmd is not None │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\site-packages\click\core.py:1698 in │
│ resolve_command │
│ │
│ 1697 │ │ # Get the command │
│ > 1698 │ │ cmd = self.get_command(ctx, cmd_name) │
│ 1699 │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\site-packages\modal\cli\run.py:130 in │
│ get_command │
│ │
│ 129 │ def get_command(self, ctx, func_ref): │
│ > 130 │ │ function_handle_or_entrypoint = import_function( │
│ 131 │ │ │ func_ref, accept_local_entrypoint=True, interactive=False, base_cmd="modal r │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\site-packages\modal\cli\import_refs.py │
│ :255 in import_function │
│ │
│ 254 │ try: │
│ > 255 │ │ module = import_file_or_module(import_ref.file_or_module) │
│ 256 │ │ obj_path = import_ref.object_path or DEFAULT_STUB_NAME # get variable named "st │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\site-packages\modal\cli\import_refs.py │
│ :80 in import_file_or_module │
│ │
│ 79 │ else: │
│ > 80 │ │ module = importlib.import_module(file_or_module) │
│ 81 │
│ │
│ C:\Users\User\AppData\Local\Programs\Python\Python311\Lib\importlib_init.py:126 in │
│ import_module │
│ │
│ 125 │ │ │ level += 1 │
│ > 126 │ return _bootstrap._gcd_import(name[level:], package, level) │
│ 127 │
│ <frozen importlib._bootstrap>:1206 in _gcd_import │
│ │
│ <frozen importlib._bootstrap>:1178 in _find_and_load │
│ │
│ <frozen importlib._bootstrap>:1137 in _find_and_load_unlocked │
│ │
└──────────────────────────────────────────────────────────────────────────────────────────────────┘
ModuleNotFoundError: No module named 'stable-diffusion-webui.pymodal'; 'stable-diffusion-webui' is not a package

すいませんがよろしくお願いします。

＊　hakurei/waifu-diffusion-v1-4のダウンロードはわざと止めています。

download-output.pyを使っての一括ダウンロードなのですが、txt2img-imagesのみだったり、特定の日付のもののみをダウンロードするにはどうすれば良いですか？

初めまして。記事を参考に、ControlNetの導入までは出来たのですが、Multi-ControlNetの使用で躓いています。
起動したWeb UIのSettingsから、ControlNetモデルの数を増やす→Apply settings→Reload UI、と操作しても、ControlNet Unitのタブが増えない状態です。
既に成功している方はいらっしゃいますか？
因みにControlNetの導入にはこちらの方の記事も参考にしました。
https://note.com/light_impala137/n/n99b014389a69

get_started.pyを実行すると、

No function was specified, and no stub variable could be found in 'get_started.py'.

Usage:
modal run <file_or_module_path>::<function_name>

Given the following example app.py:

stub = modal.Stub()

@stub.function()
def foo():
    ...

You would run foo as modal run app.py::foo

って表示されるんですが、どうすれば解消できるのでしょうか？

loraが突然適用されなくなりました。
花札マークを押すとloraの画面にはなりますが、押してトリガーワード？が挿入されても適用されません。
何か設定が必要でしょうか？

こんにちわ、質問させていただきます。
4. Modalを使ってStable Diffusion WebUIを動かす　の項目で
modal run stable-diffusion-webui.py　を実行したところ
以下のエラーが出てしまいました使っているpythonのバージョンは3.10.6です
対処方法のアドバイスのご教授お願い致します。

迅速な対応ありがとうございます！出来ました！
Twitterで同じようなエラーの方を探したとき"torchmetrics==0.11.4"を挟む方法を見かけてはいたのですが
試してみたときはトンチンカンなところに入れていたみたいで起動せずあきらめていました。
書き込む場所も丁寧に教えてくださり大変ありがとうございます。
residさんも代わりに尋ねていただきありがとうございました。

しーぴーさんこんにちわ、以前ご質問さえていただいたときは丁寧にありがとうございます。
厚かましいお願いとは存じますがまたご質問させていただきます。
あれから楽しく順調に使用させていただいていたのですが、
今月に入ってWebUIに入れないままタイムアウトになってしまい、改めて初めから導入しなおしました。
その際にipiの更新が入ったせいかはわかりませんが、実行したら「DeprecationError: Deprecated on 2023-07-05: SharedVolume(...) is deprecated. Please use NetworkFileSystem.new(...)」とエラーがでてきてしまいました。
https://note.com/light_impala137
の記事をもとに訂正しましたが、エラーメッセージはでなくなありましたがモデルのセットアップ以降のRunningが一行に進まずタイムアウトしてしまいます。
ほかに何か直すところなどあったらアドバイスお願いします。

こんにちわ。5ｹ月前に教えて頂いたtsukiyominaと申します。

9月中旬のModalアップデートで影響のあった変更箇所の内、上記コメントで書かれている部分は直せたらしく画像生成まで出来るようになりました。ありがとうございます。
恐らくそれに関連した？以下を教えて頂きたいのです。

1.「5. オマケ: 生成した画像を一括でダウンロードする」のプログラム（download-output.py）にも同様の箇所があったため修正を施し実行すると、
"DeprecationError: 2023-08-16: f.call(...) is deprecated. It has been renamed tof.remote(...)
image_path_list = list_output_image_path.call(cache)"
　という別のエラーが表示されました。そのまま鵜呑みにプログラム（download-output.py）の下から12行目を次の様に変更しました。　これで合ってますでしょうか？
　# image_path_list = list_output_image_path.call(cache)
　　 image_path_list = list_output_image_path.remote(cache)

2.上記1.が正しいのかは分かりませんがエラー表示されなくなり、更に新たに添付したSSのような別のエラーがたくさん？表示されるようになりました。
　直し方がさっぱりわかりません。
　"NotFoundError: Object is of type shared volume, not volume"

3.しーぴーさんの説明以外の部分で恐縮ですが、5ｹ月前に”せんせい”という方のコメントでモデルやVAEをアップロードするコマンドをご紹介されています。
実は私は、stable-diffusion-webui.pyの中のモデル指定部分はコメントにして、任意のタイミングでコマンドでアップロードするようにしていました。
　現在実行すると、上記2.と同様のエラーになります。

生成した画像をDL出来無いため放置していましたが、やはりmodalを使いたいです。
ご多忙とは存じますが、1.と2.だけでも教えて頂けないでしょうか？
よろしくお願いします。

SS添付し忘れ失礼しました。

お世話になっております。
以下の問題の対策をご存じでしたらご教示お願いできますでしょうか？

①modal nfs putでアップロードしたモデルが読み込まれなくなりました。（以前は使えていました）
　アップロードされていることは以下コマンドで確認済です。
　　modal nfs ls stable-diffusion-webui-main models/Stable-diffusion
　しかしWebUIを立ち上げて、左上のcheckpoint(モデル選択プルダウンメニュー)に出てきません。
　一度削除して、再アップロードしても解決しませんでした。

②controlnetモデルが表示されなくなりました。（以前は使えていました）
　モデル（pth）アップロードが成功していることは以下コマンドで確認済です。
　　modal nfs ls stable-diffusion-webui-main extensions/sd-webui-controlnet/models
　しかしWebUIのControlnetの欄のprocessor欄はちゃんと出てきますが、modelプルダウンメニューがnoneのみになってしまっています。

気になるのはmodal runでStable diffusionを起動する際に以下のエラーが出ている点です。

Error calling: /content/stable-diffusion-webui/extensions/sd-webui-controlnet/scripts/controlnet.py/ui
Traceback (most recent call last):
File "/content/stable-diffusion-webui/modules/scripts.py", line 262, in wrap_call
res = func(*args, **kwargs)
File "/content/stable-diffusion-webui/extensions/sd-webui-controlnet/scripts/controlnet.py", line 288, in ui
group, state = self.uigroup(f"ControlNet-{i}", is_img2img, elem_id_tabname)
File "/content/stable-diffusion-webui/extensions/sd-webui-controlnet/scripts/controlnet.py", line 268, in uigroup
group.register_callbacks(is_img2img)
File "/content/stable-diffusion-webui/extensions/sd-webui-controlnet/scripts/controlnet_ui/controlnet_ui_group.py", line 820, in register_callbacks
self.preset_panel.register_callbacks(
File "/content/stable-diffusion-webui/extensions/sd-webui-controlnet/scripts/controlnet_ui/preset.py", line 172, in register_callbacks
getattr(element, action)(
AttributeError: 'dict' object has no attribute 'then'

すみません。上の件、sd2になったせいで非対応になったのですね。今気が付きました。

こんにちわ。
先日は大変お世話になりました。
また１つ教えて頂きたいのですが、「3. Secretsの設定」の中の、
"ModalのGetting Startedに戻り、「Set up integrations/secrets」のところから「Hugging Face」を～"は、
"Modalログイン後に、SECRETSタブ中のCreate new secretボタンをクリックし、「Hugging Face」を～以下同様"に変更されたということで良いのでしょうか？

modal run stable-diffusion-webui.py
を実行すると#web UIを起動の所で以下のエラーが出ます。
調べた所、repositories\taming-transformersを一旦削除し、クローンし直すと良いそうですがmodalでのやり方が今一分からず教えて頂けないでしょうか？

RuntimeError: Couldn't checkout commit 24268930bf1dce879235a7fddd0b2355b84d7ea6 for Taming Transformers.
Command: "git" -C "repositories\taming-transformers" checkout 24268930bf1dce879235a7fddd0b2355b84d7ea6
Error code: 128
stdout:
stderr: fatal: reference is not a tree: 24268930bf1dce879235a7fddd0b2355b84d7ea6