Digdag x Dockerでモダンなバッチ処理環境を構築


DigDag」はTreasure Data製のワークフローエンジンのOSSです。ワークフローエンジンを使うことでバッチ処理の依存関係を明確に定義できたり、ジョブの管理をしやすくなります。また、Dockerと組み合わせることで、言語や環境を自由に選ぶことができます。

🐠 紹介スライド

2017/6/9に発表したDigdagの紹介LTのスライドです。Web画面からタスクの実行状況がわかったり、再実行ができたりするのは便利です!

🚜 Digdagの特徴

🐯 開発者の古橋さんの紹介スライド

<iframe src=//www.slideshare.net/slideshow/embed_code/key/EhZC0sExwqXhsF width=595 height=485 frameborder=0 marginwidth=0 marginheight=0 scrolling=no style=border:1px solid #CCC; border-width:1px; margin-bottom:5px; max-width: 100%; allowfullscreen>

Tokyo Ruby会議#11で開発者の古橋さんが発表されていたスライド。どんな特徴をもっているかのイメージがつきやすいと思います。

🎳 アーキテクチャとコンセプトの説明

🖥 VULTRおすすめ

VULTR」はVPSサーバのサービスです。日本にリージョンがあり、最安は512MBで2.5ドル/月($0.004/時間)で借りることができます。4GBメモリでも月20ドルです。 最近はVULTRのヘビーユーザーになので、「ここ」から会員登録してもらえるとサービス開発が捗ります!

📚 おすすめの書籍