「Lv028」の記事一覧

Deltaテーブルの `ZORDER BY` で指定する列の数は、パフォーマンスの観点から推奨される上限はあるか。

Databricks SQLの「Query History」APIを使用して取得できる情報は、最大過去何日間か。

「Databricks Runtime (DBR)」のバージョンアップを行う際、最も注意すべき点はどれか。

「Data Vault」における「Link」テーブルの主な役割はどれか。

PySparkで、複雑なネストされたJSON構造（StructType）を平坦化（Flatten）するために有用なアプローチはどれか。

Unity Catalogの「Privilege Model」において、`ALL PRIVILEGES` に含まれない（別途付与が必要な）権限はあるか。

Databricks Jobsの「Task parameter variables」で使用できる `{{job_id}}` や `{{start_time}}` はいつ評価されるか。

Spark設定 `spark.databricks.io.cache.enabled` (Disk Caching / Delta Cache) が有効な場合、データはどこにキャッシュされるか。

Delta Live Tablesパイプラインで「Development」モードを選択した場合、データの保持ポリシーはどうなるか。

Structured Streamingで、Kafkaのメッセージキー（Key）と値（Value）はデフォルトでどのデータ型として読み込まれるか。