DatabricksのDeclarative Pipelineでは、データ品質を担保するためのルール（Expectations）を宣言的に定義できます。ただ、実装方法として「SQL（YAMLに近い形式）」と「Python（DLTなどを活用）」の2つの選択肢があり、どちらを選ぶべきか迷う方も多いのではない ...

『Databricks認定データエンジニアプロフェッショナル 試験レベル ― 1日3分！気になったところから読めるデータブリックス！魂の100本ノック！』 Databricksを業務で触っている。なのに——サンプル問題を解いた瞬間、手が止まる。 「使ってはいるけど、設計 ...