PyTorch向けフレームワーク

PyTorch Lightningを1年ほど使ってみたけれど

素のPyTorchを使うのに比べてあまり楽になった気がしない
公式ドキュメントのつらみが高い
- https://twitter.com/tackman/status/1343549966455775232
  - 私は聴覚言語劣位の認知特性があり、動画解説系全般がつらいという事情はあります
  - 認知特性云々抜きでもAPIページにチュートリアルっぽい動画貼るのはナシだろと思いますが

すでに1年前のエントリだけど、PyTorch向け各フレームワークの比較記事

ただFacebook ResearchでのLightningの使われ方などを想像するに、この手のフレームワークの価値は人数が多いところでフリーダムな書き方に一定の制約を課せるところがコアバリューなのではという気がする。ので、自分の生産性を高めるという目的意識だと各機能は参考にしつつもオレオレで何かを作るスタイルでいいのでは？

tackman 2022/07/06

Pandas Tips

要素をシャッフルしたい

pandas.Sample() を使う https://pandas.pydata.org/pandas-docs/stable/reference/api/pandas.DataFrame.sample.html

tackman 2022/07/06

PyTorchでの画像ライブラリはPIL

何でcv2ではないの？という提案自体は当然出ている模様
- 公式に明確な答えはないけれど、BGRがデフォルト・なまじnumpy化されるだけに取り回しの柔軟性に欠けるなどが理由っぽい
ボイラープレートレベルのコードはfastaiの実装でいいのかも
- https://docs.fast.ai/vision.core.html#load_image
- https://github.com/fastai/fastai/blob/master/fastai/vision/core.py#L93

tackman 2023/03/03に更新

pip の --extra-index-url を poetry で解決する場合

poetry source add foo https://foo.bar/simple/

PyTorchのインストールで要求されるので出番がある

# PyTorch 1.12.x + CUDA11.6の場合の例
poetry source add --secondary pytorchcu116 https://download.pytorch.org/whl/cu116

tackman 2022/12/05

API

fastapi + uvicorn

https://fastapi.tiangolo.com/
https://www.uvicorn.org/
MLでありがちなAPI（のみ）用途にはこれで
- Flaskと違って型が効かせられるという話も。要確認

tackman 2022/12/11

Streamlit使用メモ

https://streamlit.io/

コード書く量は激烈に少ない
- 簡単な分析ツール的なものが30行ほどPython書くだけでWeb UIが出来た
何も考えないでもいい感じにWeb UIができるのは神
動作は普通に遅い、echo相当のことをするだけでも数秒待たされる
オレオレツールとして、手軽さもアプリケーションとしての完成度もnotebook以上普通のWebアプリ未満の領域向けという印象

tackman 2023/01/09に更新

VSCode向けハマりポイントとか

virtualenvのPythonを使う場合はJupyterのUIからカーネルを選択してあげる必要あり
- setting.jsonの python.defaultInterpreterPath は参照されない

poetryのvirtualenvはin-projectに作る

poetry config virtualenvs.in-project true

# 既存のvirtualenvがある場合
poetry env list
poetry env remove <current environment>
poetry install