Open3

Dataplexが解決できるDMBOKのテーマは?

ひばふぁんひばふぁん

素朴な疑問

Google CloudのDataplexが、データマネジメントでどんな課題を解決するのかを知りたい。

進め方

Dataplexの機能調査。Hands-OnはSkill BoostのLabsを使う。
DMBOKのDAMAホイールのどの領域をカバーするのかを判定する。
全体の判定が終わったら、DAMAホイールの領域のうち、気になるところだけ深ぼろうかな。

時間

2日程度で

ひばふぁんひばふぁん
  1. データメッシュ構築
    • 複数のGoogle Cloudプロジェクトに配置されたデータに論理的な(ドメイン固有など)グルーピングができる。
  2. Dataplex IAMでの権限管理
    • 単一の権限セットでデータのカラム単位でのアクセス管理やモニタリングができる。
  3. Dataplex Catalogでのメタデータ管理
    • メタデータを保存、管理し、アクセスするためのプラットフォーム。
  4. クエリの実行
    • SparkSQLなどのオープンソースツールとBigQueryを使って、メタデータを安全にクエリできる
  5. データ品質の自動測定
    • 予め定義したルールに照らしてデータを検証し、エラーがあればアラートを記録できる。

https://cloud.google.com/dataplex/docs/introduction?hl=ja