digdag

digdagを触っていてWeb UIのログが表示されない現象に遭遇しました。

task-logも正常に出力されてるし、digdag logコマンドでも正常に出力される。

解決

よくわからないまま小一時間悩んだ結果 ...

digdag

前回はdigdagのインストールと簡単な動作確認まで行いました(前回の記事)
今回は実際にdigdagのワークフローを実践してみます

ワークフロー作成

お試しでワークフローを作成するなら digdag init コマ ...

digdag

私はバッチ処理をつくった時、それを管理するのに digdag をよく利用させてもらっています。
digdag とはワークフローエンジンのことでバッチ処理のスケジューリングや実行順の制御、並列実行などを簡単に実現できます。