1. はじめに
こんにちは。MLOps エンジニア/データエンジニアの uma-chan です。
この記事は GENDA Advent Calendar 2024 2日目の記事です。
私が業務でよく利用する dbt のローカル開発環境の話をしていきます。
2. dbt とは
dbt について知りたい方がおそらく最初に読む記事から抜粋。
dbt（正式名称はdata build tool）はデータアナリストやアナリティクスエンジニアが（ほぼ）SQLだけで、データを変換しデータウエアハウス、データマートを構築していくことができるツールです。
FROM 句内のサブクエリの部分を別の SQL ファイルに切り出していく形で想像すると大体合ってるはず。
SELECT 文の書かれた SQL ファイル (モデルといいます) が複数あって FROM 句内で SQL ファイル名 (モデル) を指し示すことでモデル同士の依存関係を表現しています。
3. dbt 開発環境に求めること
個人の主観で列挙します。
- dbt 向け SQL ファイルのフォーマッタである sqlfmt が動くこと
- フォーマッタを動かすというテキストエディタとしては基本的な部分なので、重要ではあるものの今回は割愛します
- dbt コマンドとの連携
- 手数少なく
dbt runなどのコマンドを実行できること
- 手数少なく
- 定義参照・自動補完のようなモダンな編集機能 (LSP)
- 最近の開発ではこれらがないと非効率ですが dbt 向け LSP (各テキストエディタが共通で利用できるコア機能) が提供されていないため各テキストエディタが自前で対応する必要があります
4. 2024年現在の dbt 開発環境
4.1. VS Code
ベンチマークとして VS Code について言及します。
やはり圧倒的に使いやすいです。
以下の拡張機能を使用するのが現状の最適解です。
日本語解説記事は以下をはじめとして複数投稿されています。
4.2. Neovim
VS Code 向け拡張機能に比べると提供されている機能の数は少ないものの十分に豊富な機能をもつプラグインが提供されています。
4.3. Vim
以下のプラグインでシンタックスハイライトといくつかの dbt コマンド連携機能が提供されています。
正直なところ機能が少ないので Vim ではなく Neovim もしくは VS Code を使うことをおすすめします。
5. Vim の救済
……ですが Vim でも dbt 開発をしたいですよね！
なんといっても私の好きなエディタですし。
というわけで最低限欲しかったモデル定義へのジャンプ機能のプラグインを作りました。
インストール方法や使い方は README を参照してください。
ジャンプ機能はコマンドで提供したので各自好みのキーマッピングを設定することをオススメします。
ちなみに Vim/Neovim 両対応のフレームワークである Denops で書いたので Neovim でも使えます。
そしてこの際なので他の Denops プラグインの沼にもハマっていきましょう。。
6. おわりに
今回プラグインを作るために Denops や Deno の情報収集をしつつ、慣れない TypeScript を書いていたのですが結構楽しかったです。
Discussion