背景 dbt docsのカラム等を確認する画面がstruct構造にしたことによりかなりみづらくなった 下記の様にColmunsを確認するのにかなりのサイト内frameでスクロールが発生している状況 カラム名が長い＋Typeの中にStruct内のTypeが全て表示されるのが原因 拡張…

背景 dbtを使う事が増えて来た 日々学びがある為、dbtについてもう少し学びを深めていきたい 年始にdbtのコースのセールで購入したので少しづつ進めて行く www.udemy.com 分かった事&メモ データパイプラインとETLプロセスの間を埋めているのがdbt SQLによる…

uv run dbt compile --target dev -s *** uv で管理している仮想環境の中で dbt を起動し、dev ターゲット向けに、指定セレクタのモデルだけを compile する target/compiled/配下に書き出す target devでprofiles.ymlに定義されている接続先 dev sでselect…

課題と試したこと PR作成時のCIでdbtのテーブル変更後にstaging環境のBQにdatasetを自動的に作る様にしている その後のstaging環境でのSQLのselect分を作るのが面倒い 環境名、PR番号、テーブル名 上記をサッとPRのFiles Changedを開いたら右上に組み立てら…