前回のTreasure Workflow for ビギナー記事から2年の月日がたってしまった。
- Treasure Workflow for ビギナー 環境構築編 - Secret Ninja Blog
- Treasure Workflow for ビギナー ~digファイル書き方編~ - Secret Ninja Blog
Arm Treasure Data Advent Calendar 2019 - Adventar 1日目の記事です。
さて、Treasure WorkflowはOSSとして提供されているdigdagと呼ばれるワークフローエンジンをベースに構築されています。 基本的な機能は同じですが、大きく違う点が１つあります。 それがTreasure DataのWeb Consoleに組み込まれたWorkflow UIです。
UIの違いについて、スクリーンショットで掲載していきます。
プロジェクト一覧
Digdagのプロジェクト一覧を下記のように参照できます。
Workflow UI
プロジェクトを検索したり、ワークフローの実行履歴を一覧することができます。
digdag UI
新規プロジェクト作成
UI上からプロジェクトを新規作成することができます。
Workflow UI
Workflow UIではテンプレートを元に新規作成をすることができます。
digdag UI
エディタ画面
エディタ画面ではdigファイルやSQLファイルの編集を行うことも可能です。
Workflow UI
digdag UI
実行ログ画面
各タスクの処理時間を眺めて、処理の遅いタスクに見つけることができます。 Workflow Consoleでは、TreasureData上のジョブリンクなどもついているため、遷移が簡単ですね。
Workflow UI
digdag UI
UIでできないこと
2019年12月時点では下記のことをUIから実行することができず、CLIを利用する必要があります。
- 過去RevisionへのRevert
- Projectファイルの一括ダウンロード
- Githubなどへのシームレスなインテグレーション
さいごに
サービスを開発する上でOSSと実際のプロダクト開発のバランスを取るというのは非常に難しく、十二分な人的リソースがないとなかなか注力できません。 日本でもDigdag / Treasure Workflowを開発するエンジニアを募集しているので、ご興味がある方はぜひ！
