雑なメモ

学びを記す

Digdag

digdagをDockerizeしてECS上で運用することにしました

データ分析や可視化に伴う複雑なジョブフローの改善にはdigdagが便利です。 少しずつ採用事例も増えているようです。 qiita.com 今回は、そんな便利なdigdagをECS上に構築しました。 *1 事前知識 digdagに関する基本的な知識は、以前のエントリを参考にして…

Digdag + embulk + BigQuery + Re:dash でデータ分析基盤構築の夢を見る

Digdagが先日リリースされたのをきっかけにデータ解析基盤の夢を見た。