dbtとAWSとサーバレス
無料で読める本
新しいデータパイプライン構築方法の潮流であるELT。そのELTのTを担うOSSであるdbtをコンテナ化してサーバレスの基盤でデータパイプラインを実行することができるハンズオンを用意しました。触って学んでdbtとコンテナとサーバレス技術を身に着けてデータエンジニアとして成長しましょう!
Chapters
本ハンズオンの概要
ハンズオン環境の構築
dbtのプロジェクトを作成しよう
【閑話休題】dbtについて解説
Dockerfileとbuildspec.ymlのコーディング
CodePipelineの実装の確認
ECSのクラスターとタスクについて
Step Functionsのステートマシンについて
ドキュメントのホスティング環境の構築
【おまけ】データセットを可視化してみよう(Jupyter Notebook)
後片付け
Author
Topics