背景
- 仕事でbq,dbtの組み合わせで使用している
- array/struct構造も使っている -dbtのリネージだとテーブルレベルでしか見えない
- 上流・下流に特定のカラムが流れているかをパッと調査したい
調査してみた
- dbt-col-lineageがよさそうだったがBQ/struct構造に対応していなかった
- https://github.com/google/googlesql これが近そうだったが、グラフィカルにリネージを追いたかった
- BQにもリネージがあり、列レベルに対応したとのこと
- Data Lineage APIの有効化が必要そうなのでまた有効にして試してみる
