ワークフローエンジンいろいろ

ちょっと気になって調べた。メモだけ。

https://qiita.com/ushi_198/items/20b400e2cf0fb03a5c7a

https://qiita.com/e99h2121/items/76807ee59a28a9897225

https://future-architect.github.io/articles/20220111a/

https://dev.classmethod.jp/articles/reinvent2023-report-api307/

https://dev.classmethod.jp/articles/prefect-try/

https://gihyo.jp/admin/serial/01/ubuntu-recipe/0607

紹介されていたもののGitHubレポジトリ。

https://github.com/apache/airflow

https://github.com/treasure-data/digdag

https://github.com/PrefectHQ/prefect

https://github.com/argoproj/argo-workflows

https://github.com/spotify/luigi

https://github.com/n8n-io/n8n

AWS系

https://aws.amazon.com/jp/step-functions/

https://aws.amazon.com/jp/managed-workflows-for-apache-airflow/

あとこういうのも見つけた。

DAGster
https://dev.classmethod.jp/articles/dagster-data-orchestrator/

https://github.com/dagster-io/dagster

Ploomber
https://ploomber.io/

https://github.com/ploomber/ploomber

これはちょっと試してみた

https://zenn.dev/kun432/scraps/fa6023c11aebf0

https://github.com/pathwaycom/pathway

https://docs.conductor-oss.org/index.html

これちょっと面白そう。

https://github.com/Avaiga/taipy

https://github.com/DAGWorks-Inc/hamilton