参考
総合
Azkaban
メモ
機械学習で利用されるフロー管理ツールを軽くさらってみる。
よく名前の挙がるもの
- Apache Airflow
- DigDag
- Oozie
機械的な検索
Airflowの代替
alternativetoでAirflowを検索した結果 では以下の通り。
- RunDeck
- OSSだが商用版もある。自動化ツール。ワークフローも管理できるようだ
- StackStorm
- どちらかというとIFTTTみたいなものか？
- Zenaton
- ワークフローエンジン。JavaScriptで記述できるようだ
- Apache Oozie
- Hadoopエコシステムのワークフローエンジン
- Azkaban
- ワークフローエンジン
- Azkabanのフロー書き方 の通り、YAMLで書ける。
- LinkedIn が主に開発
- Metaflow ★
- ワークフローエンジン
- 機械学習にフォーカス
- Netflix と AWS が主に開発
- luigi
- ワークフローエンジン
- Pythonモジュール
- Spotify が主に開発